微比恩 > 信息聚合 > 都给我开口说话!MakeItTalk的神奇魔法让你和蒙娜丽莎对话

都给我开口说话!MakeItTalk的神奇魔法让你和蒙娜丽莎对话

2020-10-19 14:13:39来源: 新浪科技

富有表现力的动画谁都想要!面部动画在很多领域都是一项关键技术,比如制作电影、视频流、电脑游戏、虚拟化身等等。尽管在技术上取得了无数的成就,但是创造逼真的面部动画仍然是计算机图形学的挑战。一是整个面部表情包含了完整面部各部分之间的相互关系,面部运动和语音之间的协同是一项艰巨的任务,因为面部动态在高维多重影像中占主导地位,其中头部姿势最为关键。二是多个说话人会有不同的说话方式,控制嘴唇一致,不足以了解说话的人的性格,还要表达不同的个性。针对上述问题,Yang Zhou博士和他的团队提出了一种具有深度结构的新方法「 MakeItTalk」。这是一种具有深度架构的新方法,只需要一个音频和一个面部图像作为输入,程序就会输出一个逼真的「说话的头部动画」。下面,我们就来看看,MakeItTalk的是如何让图片「说话」的。都给我开口说话!神奇的 MakeItTalk 是什么?MakeItTalk是一个新的深度学习为基础的架构,能够识别面部标志、

关注公众号