(求测试)“PixAI” 效果比 waifu2x 更好的 iOS 本地超分辨率 app

2022-10-15 18:24:02 +08:00
 Cola90

开发背景

最近了解 CV 的时候看到了一个很棒的项目Real-ESRGAN,超分效果很好,想着这么好的东西应该放到用户更多的移动端才能发光发热啊。搜了一下还没有 iOS 端的 app ,于是开始了 Real-ESRGAN to iOS 移植的道路。

效果展示

想自己亲自测试下的可以点击在线 demo
引用一张仓库的图

应用特色

  1. 完全在设备端推理,随手可用
  2. 不会上传图片,隐私 free
  3. 默认开启精度最高的两个模型,一步到位

使用须知

  1. 目前已基本完成功能开发
  2. 由于是设备端推理,最终输出的效果很大程度取决于设备的 ram 和 soc
  3. 由于是设备端推理,加上 CV 模型占用大的离谱 + iOS 天生的小内存,OP 人已经花了很大精力去优化 RAM 占用,在 效果和稳定性之间做平衡
  4. 如果遇到崩溃问题,在设置界面先尝试切换 质量模式 ,不行再尝试重新校准性能,如果还是出错请在Testflight中发邮件告诉我,或者在这里跟帖

测试要求

  1. 希望帮忙测试各个功能是否正常,主要测试执行推理的时候应用是否崩溃
  2. 分别使用 CPU 和 Metal 推理 APP 自带的水懒图片(原图分辨率为 1080x720 ),在跟帖回复一下设备型号和 CPU 、Metal 输出的增强图像分辨率

TestFlight 链接

点击加入 PixAI Beta 版本测试

感谢支持!

3480 次点击
所在节点    分享创造
28 条回复
Love4Taylor
2022-10-15 19:44:17 +08:00
其实有了

Cola90
2022-10-15 20:43:16 +08:00
@Love4Taylor 测试了一下,这个项目很不错,但他用的是移动设备版本的算法,速度很快,op 这边用的是 pc 版本的算法,精度会更高,但对设备的性能要求也更高
shyling
2022-10-15 20:51:43 +08:00
@Love4Taylor 这是什么 app 呀
WildCat
2022-10-15 20:55:56 +08:00
@Love4Taylor 同问,这是哪个 app
Love4Taylor
2022-10-15 21:02:04 +08:00
@shyling
@WildCat 就 waifu2x

不过高级模型需要内购解锁

Love4Taylor
2022-10-15 21:04:01 +08:00
@Cola90 有一说一 waifu2x 这个在某些情况下已经比较吃力了,那你这个岂不是更加。
zmxnv123
2022-10-15 21:23:00 +08:00
不懂深度学习,想问下不同机器优化后的结果不一样吗。
用 ipad pro 增强后的效果远好于 iphone se 。
Cola90
2022-10-16 00:00:32 +08:00
@zmxnv123 主要是设备的 ram 限制了输出图片的质量,ipad pro 的 ram 远比 se 大
刚刚更新了一个版本,继续优化了 ram 的占用,安装后记得重新进行性能校准
Cola90
2022-10-16 00:01:45 +08:00
@Love4Taylor 欢迎测试,个人觉得还可以
yasumi
2022-10-16 03:21:36 +08:00
和 PC 端输出的图片不一样
Cola90
2022-10-16 08:38:23 +08:00
@yasumi 方便分享下原图?
yasumi
2022-10-16 15:22:54 +08:00
unishare
2022-10-16 17:42:16 +08:00
软件效果不错,iphone 11 测试反馈一下,后期是不是要上商店,有没有给预定一个兑换码,哈哈哈哈~~
得到的分辨率:2640x1760
unishare
2022-10-16 17:44:47 +08:00
看起来是清晰了不少
Cola90
2022-10-16 18:26:40 +08:00
@yasumi 这个原图太大了,因为手机端资源限制( pc 版本模型占用高),会先进行下采样再超分
Cola90
2022-10-16 18:27:51 +08:00
@unishare 那必须的哈,感谢反馈,看来 a13 上运行也没问题
Love4Taylor
2022-10-16 22:36:23 +08:00
建议参考 waifu2x 接入下分享菜单?

Love4Taylor
2022-10-16 22:43:27 +08:00
这就是为什么我现在基本用 Real-CUGAN 而非常讨厌用 Real-ESRGAN 的原因,细节被抹的一干二净,以前拉过一张黑丝的纹理给我直接抹成油光。



laincat
2022-10-17 09:07:47 +08:00
我去,上面的比较,那等 OP 也支持一发 Real-CUGAN 好了,多个引擎选择也是好事。
Cola90
2022-10-17 10:14:26 +08:00
感谢大家的反馈
目前收到的反馈
1. 某些设备点击分享后会崩溃,正在排查
2. 输出图片比原图小的问题,正在修复

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/887167

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX