微比恩 > 信息聚合 > 古典人像秒变 3D,视角还能随意切,华为与上交联手出品

古典人像秒变 3D,视角还能随意切,华为与上交联手出品

2021-10-30 19:25:19来源: IT之家

如果让 GAN 生成的逼真人像变成 3D 版,会怎样?仿佛有摄像机对着人像直拍,正面、侧面、仰视、俯视不同角度都能展现。真的有种人要从画中走出来那味儿了。而且,这些效果都是由静态单视角图片生成的!甚至能让卡通人像立体起来。这就是上海交通大学和华为的最新研究:CIPS-3D。它是一种基于 GAN 的 3D 感知生成器,只用原始单视角图像,无需任何上采样,就能生成分辨率 256×256 的清晰图像。并且创下 3D 感知图像合成的新记录,FID 仅为 6.97。现在,这个项目在 GitHub 上已有 200 + 星,作者已将源代码开源,训练配置文件将在后续发布。搞定镜像对称在高清人脸数据集 FFHQ 上,CIPS-3D 的表现可以说非常 nice,连古典画都能变成立体版。当然也能搞定不同动物的 face。看到图像从 2D 直接变成 3D,可能有人已经想到了谷歌大名鼎鼎的 NeRF。它只需要输入少量静态图片,就能做到多视角的逼真 3D

关注公众号
标签: 华为