李飞飞团队实现“隔空建模”，透过遮挡物还原完整 3D 人体模型

图片地址：https://img.ithome.com/newsuploadfiles/2024/1/3af4156e-ae2e-408c-aadf-b940c3e32ce7.gif

注意看，这个男人搬着一个长长的柜子，画面中半个人都被遮挡住了。但即使有这样的遮挡，男人的整个身体在 AI 面前依然是无所遁形。哪怕是蹲在椅子背后只露出头，依然可以被模型完整还原。从遮挡物背后把人“揪”出来的，是李飞飞团队推出的人体建模新工具 Wild2Avatar（本文简称 W2A）。只要一段 4 秒左右的单角度视频，就能构建出完整的 3D 模型，有遮挡也不怕。相比此前的 SOTA 方法，Wild2Avatar 在人体建模上可谓是实现了质的飞跃。建模效果完胜 Vid2Avatar从下面的对比图中（从左到右依次为带遮挡原图、Vid2Avatar 提取结果和 W2A 提取结果）可以看到，作为 baseline 的 Vid2Avatar 方法只能大概描绘出人的轮廓，遮挡物直接被“拍扁”到了人物身上，而且轮廓看上去也不够准确。而 W2A 提取出的任务不仅轮廓更加精确，看上去也更具立体感，关键是遮挡物被完美地去除，显现出了完整的人物结构。