V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
layumi
V2EX  ›  分享创造

[开源] 单张图像 3D 人体重构

  •  1
     
  •   layumi ·
    layumi · 2023-03-09 11:32:22 +08:00 · 1701 次点击
    这是一个创建于 624 天前的主题,其中的信息可能已经有所发展或是发生改变。

    License: MIT Python 3.7 Language grade: Python

    3D Magic Mirror: Clothing Reconstruction from a Single Image via a Causal Perspective

    <center></center>
    

    [Project] [Code] [Paper]

    3D Magic Mirror: Clothing Reconstruction from a Single Image via a Causal Perspective, arXiv preprint arXiv:2204.13096, 2022.
    Zhedong Zheng, Jiayin Zhu, Wei Ji, Yi Yang, Tat-Seng Chua

    基于的想法是,人看到一张 2D 图像 会能理解 3D 的信息,那么网络通过训练(“看很多不同视角的 2D 人图像”)应该也能行。

    https://github.com/layumi/3D-Magic-Mirror

    要点到 github 才能看到 gif 。 小弟做的还是比较初步。

    这个网络的好处是 简单,能处理人 头发 手提包 和 裙子 的重构问题,

    缺点也是 简单,由于是纯自监督,没有用人体模型( SMPL )方法,所以细节恢复得不好。受限于分辨率,人脸比较模糊。

    感谢🙏~~欢迎点个 star ~~感谢🙏

    第 1 条附言  ·  2023-03-09 12:03:44 +08:00

    9 条回复    2023-03-14 11:16:04 +08:00
    zhangsimon
        1
    zhangsimon  
       2023-03-09 11:53:30 +08:00   ❤️ 1
    图挂了
    7gugu
        3
    7gugu  
       2023-03-09 14:13:16 +08:00   ❤️ 1
    好厉害的样子👍
    cxumol
        4
    cxumol  
       2023-03-11 07:12:43 +08:00
    suyeH
        5
    suyeH  
       2023-03-13 12:24:18 +08:00
    yangyi 大佬,不过你这代码结构属实离谱,这么多 py 文件放根目录
    layumi
        6
    layumi  
    OP
       2023-03-14 11:07:30 +08:00
    @cxumol 哦哦 您好 ,pifuhd 在其他数据集上,效果还挺差的。迁移能力比较差一些 。 我当时在这篇论文 的 Fig9 里复现过。
    layumi
        7
    layumi  
    OP
       2023-03-14 11:08:39 +08:00
    pifuhd 对于低分辩率的 情况比较差。 很容易出现 孤立的 一块一块的 人残缺不全的结果。
    layumi
        8
    layumi  
    OP
       2023-03-14 11:10:01 +08:00
    @suyeH 哈哈,是。我想先 open 出来,然后再慢慢整理一下。按照 readme 来运行的话,其实也就几个关键 py 。
    layumi
        9
    layumi  
    OP
       2023-03-14 11:16:04 +08:00
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5277 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 08:25 · PVG 16:25 · LAX 00:25 · JFK 03:25
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.