渲染速度超 100 FPS，浙大研发突破性框架 Human101：利用单视角视频构建数字人体模型

图片地址：https://img.ithome.com/newsuploadfiles/2023/12/170e68d5-67dd-43d0-b299-06d0c83d938a.jpg?x-bce-process=image/format,f_auto

IT之家 12 月 29 日消息，在虚拟现实和 3D 建模过程中，如何利用有限的数据源（例如单视角的多段视频），构建动态、高保真数字人体模型存在诸多挑战。传统方法主要依赖大量训练数据和复杂的神经网络架构，需要平衡详细且准确的数字模型和实时应用程序所需的计算效率，因此在渲染速度和模型保真度方面会有所牺牲。浙江大学 ReLER 实验室携手 CCAI，为了应对这些调整，开发突破性框架--Human101，可以显著提高虚拟现实应用程序中的训练和渲染速度。这种创新方法在确保生成模型的高保真度情况下，快速高效地重建 3D 数字人体模型。Human101 的核心在于集成了 3D 高斯散射和先进的动画技术，有助于高效处理单视角视频数据，生成动态的 3D 人体模型。Human101 利用了一种新颖的、以人类为中心的前向高斯动画方法，避免了对目标姿势点的相应规范点的穷举搜索，直接将规范点变形到观察空间，简化了变形过程并提高了渲染速度。此外