IT之家 10 月 21 日消息,复旦大学和百度联合开发了一款名为 Hallo2的全新 AI 模型,该模型可以生成长达数小时的 4K 分辨率人物动画,现已在 GitHub 发布开源。Hallo2 模型建立在 latent diffusion models 的基础上,相比上一代 Hallo 模型的效果更好,支持了长视频生成,通过引入数据增强方法如 patch-drop 和高斯噪声,有效提高了长时间视频的视觉一致性和时间连贯性。Hallo2 还结合了向量量化生成对抗网络和时间对齐技术,保证了高分辨率视频的质量和流畅性。此外,Hallo2 将可调整的语义文本标签的肖像表情作为条件输入。这超出了传统的音频提示,可以提高可控性并增加所生成内容的多样性。项目页面介绍称,Hallo2 是第一种实现 4K 分辨率并生成长达 1 小时的音频驱动的人像图像动画的方法,并通过文本提示进行增强。IT之家附 Hallo2 项
首发根据音频生成 4K 分辨率 1 小时长视频,复旦、百度联手打造 AI 开源模型 Hallo2
2024-10-21 09:42:57来源: IT之家
关注公众号
赞
你的鼓励是对作者的最大支持
- 4K 165Hz QD-Mini LED:AOC 27 英寸显示器 2869 元限时购(3 年以换代修)2024-10-21 09:57:11
- 9 月全球电动汽车销量创新高,中国贡献超六成2024-10-21 09:57:35
- 荣耀 Magic7 系列手机预热视频公布,新机有望配备可变光圈镜头2024-10-21 09:59:29
- 重回 5699 元:三星 S23 Ultra 手机 12G 版京东限时购(上市 9699 元)2024-10-21 10:02:18
- 真我 realme UI 6.0 内测用户招募开启:限 GT5 Pro、GT6 手机,10 月 23 日推送2024-10-21 10:19:53
- 标致 208 Racing 拉力赛车发布:专为 FR6 Trophy 赛事打造,售价 38900 欧元2024-10-21 10:20:16
- 899 → 498 元:一加 Buds Pro 2 真无线降噪耳机百亿补贴2024-10-21 10:22:32
- 阿维塔:若官方原因导致阿维塔 07 交付延期无法申领国补,将给予全额补贴2024-10-21 10:25:12
- 定制全光谱灯珠 / 自然风感:小米米家风扇灯 42 英寸京东 454 元补贴购2024-10-21 10:29:24
- 韩国电信宣布大重组:近 6000 人受影响,超 3 亿韩元买断式裁员和重新分配岗位二选一2024-10-21 10:29:34
- 1为什么又流行小屏手机了?
- 2瑞士信息与通信科技公司Oviva开发体重相关疾病管理应用程序,为肥胖及糖尿病患者提供数字治疗方案 | 瑞士创新100强
- 3BE OPEN推出国际青年创意竞赛DESIGNING FUTURES 2050,聚焦联合国可持续发展计划
- 4房地产“白名单”项目信贷规模年底前将增至4万亿元,业内透露:有银行“加班加点”整理相关评估材料
- 5Cognizant宣布其Neuro® AI平台多智能体编排功能升级
- 6CIA前首席运营官Andy Makridis作为公共领域顶级顾问加入DXC
- 7HMD 与电影《毒液 3:最后一舞》合作,有望推出联名手机
- 8法巴银行及BPCE银行皆有意竞购汇丰法国人寿保险业务
- 9迪士尼任命James P. Gorman为董事长
- 10蜗牛游戏:重新符合纳斯达克最低股价要求