苹果把 NeRF 玩出新高度：只需单个 10s 视频，就能重构人物动作和场景

图片地址：https://img.ithome.com/newsuploadfiles/2022/8/14a36807-f992-46c8-8c91-26bed3f34494.gif

有了这个发明，以后演员拍戏再也不用抠图了？答：可以直接一键合成。（手动狗头）让我们赶紧来看看，这个由苹果最新研发的 NeuMan 框架：只需输入一段 10s 左右的人物视频，就能合成该人物在新场景下做着各种新动作的影像。前空翻？so easy！跳舞那也是不在话下。这妖娆的舞姿，看来 NeuMan 心里也有一个舞魂～有网友看完就表示：喔～简直是电影界未来的发展方向。目前，有关 NeuMan 的研究论文已被 ECCV’22 收录，并且已在 GitHub 上开源。全新场景渲染在介绍 NeuMan 的原理之前，让我们再来欣赏几个酷炫的例子～如下图所示，左上角是输入的训练视频，左下角是新的背景，右边则是合成后小哥在新背景下跳跃的效果。不仅是跳跃这种常规操作，广播体操也完全没问题。更厉害的是，NeuMan 还可以将上面例子中的两个人合成到一起。再加上一个人，立马变成魔性的广场舞视频。这微笑的小表情，真的很难解释不是本人亲自跳的（手动狗头）。