V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
Cola90
V2EX  ›  分享创造

(求测试)“PixAI” 效果比 waifu2x 更好的 iOS 本地超分辨率 app

  •  
  •   Cola90 · 2022-10-15 18:24:02 +08:00 · 3451 次点击
    这是一个创建于 549 天前的主题,其中的信息可能已经有所发展或是发生改变。

    开发背景

    最近了解 CV 的时候看到了一个很棒的项目Real-ESRGAN,超分效果很好,想着这么好的东西应该放到用户更多的移动端才能发光发热啊。搜了一下还没有 iOS 端的 app ,于是开始了 Real-ESRGAN to iOS 移植的道路。

    效果展示

    想自己亲自测试下的可以点击在线 demo
    引用一张仓库的图 官方效果

    应用特色

    1. 完全在设备端推理,随手可用
    2. 不会上传图片,隐私 free
    3. 默认开启精度最高的两个模型,一步到位

    使用须知

    1. 目前已基本完成功能开发
    2. 由于是设备端推理,最终输出的效果很大程度取决于设备的 ram 和 soc
    3. 由于是设备端推理,加上 CV 模型占用大的离谱 + iOS 天生的小内存,OP 人已经花了很大精力去优化 RAM 占用,在 效果和稳定性之间做平衡
    4. 如果遇到崩溃问题,在设置界面先尝试切换 质量模式 ,不行再尝试重新校准性能,如果还是出错请在Testflight中发邮件告诉我,或者在这里跟帖

    测试要求

    1. 希望帮忙测试各个功能是否正常,主要测试执行推理的时候应用是否崩溃
    2. 分别使用 CPU 和 Metal 推理 APP 自带的水懒图片(原图分辨率为 1080x720 ),在跟帖回复一下设备型号和 CPU 、Metal 输出的增强图像分辨率

    TestFlight 链接

    点击加入 PixAI Beta 版本测试

    感谢支持!

    第 1 条附言  ·  2022-10-21 21:47:49 +08:00
    从前两天开始 testflight 出现问题,昨天联系苹果说下周一给答复(周末不上班),有兴趣的朋友只能继续等等了
    第 2 条附言  ·  2022-10-22 21:02:44 +08:00
    已恢复
    28 条回复    2022-12-19 20:32:29 +08:00
    Love4Taylor
        1
    Love4Taylor  
       2022-10-15 19:44:17 +08:00
    其实有了

    Cola90
        2
    Cola90  
    OP
       2022-10-15 20:43:16 +08:00
    @Love4Taylor 测试了一下,这个项目很不错,但他用的是移动设备版本的算法,速度很快,op 这边用的是 pc 版本的算法,精度会更高,但对设备的性能要求也更高
    shyling
        3
    shyling  
       2022-10-15 20:51:43 +08:00
    @Love4Taylor 这是什么 app 呀
    WildCat
        4
    WildCat  
       2022-10-15 20:55:56 +08:00 via iPhone
    @Love4Taylor 同问,这是哪个 app
    Love4Taylor
        5
    Love4Taylor  
       2022-10-15 21:02:04 +08:00 via iPhone   ❤️ 1
    @shyling
    @WildCat 就 waifu2x

    不过高级模型需要内购解锁

    Love4Taylor
        6
    Love4Taylor  
       2022-10-15 21:04:01 +08:00 via iPhone
    @Cola90 有一说一 waifu2x 这个在某些情况下已经比较吃力了,那你这个岂不是更加。
    zmxnv123
        7
    zmxnv123  
       2022-10-15 21:23:00 +08:00
    不懂深度学习,想问下不同机器优化后的结果不一样吗。
    用 ipad pro 增强后的效果远好于 iphone se 。
    Cola90
        8
    Cola90  
    OP
       2022-10-16 00:00:32 +08:00
    @zmxnv123 主要是设备的 ram 限制了输出图片的质量,ipad pro 的 ram 远比 se 大
    刚刚更新了一个版本,继续优化了 ram 的占用,安装后记得重新进行性能校准
    Cola90
        9
    Cola90  
    OP
       2022-10-16 00:01:45 +08:00
    @Love4Taylor 欢迎测试,个人觉得还可以
    yasumi
        10
    yasumi  
       2022-10-16 03:21:36 +08:00 via iPhone
    和 PC 端输出的图片不一样
    Cola90
        11
    Cola90  
    OP
       2022-10-16 08:38:23 +08:00
    @yasumi 方便分享下原图?
    yasumi
        12
    yasumi  
       2022-10-16 15:22:54 +08:00 via iPhone
    unishare
        13
    unishare  
       2022-10-16 17:42:16 +08:00
    软件效果不错,iphone 11 测试反馈一下,后期是不是要上商店,有没有给预定一个兑换码,哈哈哈哈~~
    得到的分辨率:2640x1760
    unishare
        14
    unishare  
       2022-10-16 17:44:47 +08:00
    看起来是清晰了不少
    Cola90
        15
    Cola90  
    OP
       2022-10-16 18:26:40 +08:00
    @yasumi 这个原图太大了,因为手机端资源限制( pc 版本模型占用高),会先进行下采样再超分
    Cola90
        16
    Cola90  
    OP
       2022-10-16 18:27:51 +08:00
    @unishare 那必须的哈,感谢反馈,看来 a13 上运行也没问题
    Love4Taylor
        17
    Love4Taylor  
       2022-10-16 22:36:23 +08:00 via iPhone   ❤️ 1
    建议参考 waifu2x 接入下分享菜单?

    Love4Taylor
        18
    Love4Taylor  
       2022-10-16 22:43:27 +08:00 via iPhone
    这就是为什么我现在基本用 Real-CUGAN 而非常讨厌用 Real-ESRGAN 的原因,细节被抹的一干二净,以前拉过一张黑丝的纹理给我直接抹成油光。



    laincat
        19
    laincat  
       2022-10-17 09:07:47 +08:00
    我去,上面的比较,那等 OP 也支持一发 Real-CUGAN 好了,多个引擎选择也是好事。
    Cola90
        20
    Cola90  
    OP
       2022-10-17 10:14:26 +08:00
    感谢大家的反馈
    目前收到的反馈
    1. 某些设备点击分享后会崩溃,正在排查
    2. 输出图片比原图小的问题,正在修复
    beixiao
        21
    beixiao  
       2022-10-18 22:42:52 +08:00 via iPhone
    iPhone Xr 64G IOS16.1 跑测试闪退,直接用不了了😂
    Cola90
        22
    Cola90  
    OP
       2022-10-19 08:24:24 +08:00 via iPhone
    @beixiao 测试闪退这的确在我意料之外,晚点看看 ku
    beixiao
        23
    beixiao  
       2022-10-19 11:08:10 +08:00 via iPhone
    @Cola90 最新的 build10 还是会闪退🙈
    Cola90
        24
    Cola90  
    OP
       2022-10-19 23:44:54 +08:00 via iPhone
    不知道为什么链接访问不到了,猜测被苹果限流或者服务器崩了
    leonardleemaster
        25
    leonardleemaster  
       2022-10-20 12:02:13 +08:00 via iPhone
    还有 testflight 名额么?
    Cola90
        26
    Cola90  
    OP
       2022-10-20 12:57:14 +08:00 via iPhone
    @leonardleemaster 有的,但现在不知道出了什么问题,链接进去看不到,在联系苹果解决
    leonardleemaster
        27
    leonardleemaster  
       2022-12-19 12:17:26 +08:00 via iPhone
    @Cola90 用了一段时间来回复了,a12x 用着没有问题,目测效率比 waifu2x 高 20%至 50%。
    Cola90
        28
    Cola90  
    OP
       2022-12-19 20:32:29 +08:00
    @leonardleemaster hhh, 感谢支持,用更新一些的芯片速度可能会有惊喜哦
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   3050 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 36ms · UTC 14:54 · PVG 22:54 · LAX 07:54 · JFK 10:54
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.