从 1 小时到 3.5 分钟，Meta 新算法一部手机搞定 3D 人脸数据采集，可用于 VR 的那种

图片地址：https://img.ithome.com/newsuploadfiles/2022/7/70db6cfd-d25b-4494-958a-f8e4570e770e.gif

搞定这样的人脸 3D 建模需要几步？在数据采集的阶段，答案是：一部手机 + 3.5 分钟。没错，仅凭这 3.5 分钟的数据，就足以生成高保真、可驱动的真实 3D 人脸头像。这项研究来自 Meta Reality Labs—— 就是扎克伯格元宇宙计划里的那个核心部门。论文已经被 SIGGRAPH 2022 接收。作者提到，这一方法适用于 VR 应用。也就是说，在 VR 的世界里，以后你可能就不必顶着一张卡通脸登场了。而是可以方便地与胖友们“真身”相见。方法原理实现这一结果的方法框架如下图所示：具体而言，分为三个部分。首先，是要用大型多视角人脸数据集训练一个超网络，这个超网络可以通过神经网络解码器产生专属于个人的头像参数。数据集中的人脸由多视角捕捉系统采集，包括 255 位不同年龄、性别和种族参与者的面部图像数据。△ 左为图像捕获设备；右为采集到的人脸这个捕获 3D 人脸的巨型装置是 Meta 在 2019 年研发的，其中配备 17