字节跳动OmniHuman数字人模型即将上线:图音频结合,轻松生成视频!

发布时间:2025-03-24 08:50:07 来源:互联网

近期,抖音集团旗下备受瞩目的图片视频工具即梦AI在官方社交媒体上重磅发布了一条新功能上线预告片,预示着即梦AI又将带来全新的精彩体验!

字节跳动OmniHuman数字人模型即将上线:图音频结合,轻松生成视频!

视频显示,新功能采用了全新的多模态视频生成模型OmniHuman,让用户仅需输入一张图片和一段音频,就可以生成一条生动的AI视频,有望大幅提升AI短片的制作效率和质量。

OmniHuman技术主页信息显示,该模型为字节跳动自研的闭源模型,可支持肖像、半身以及全身等不同尺寸的图片输入,并根据输入的音频,在视频中让人物生成与之匹配的动作,包括演讲、唱歌、乐器演奏以及移动。

对于人物视频生成中常见的手势崩坏,也相比现有方法取得了显著的改善。

此外,对动漫、3D卡通等非真人图片输入的支持效果也较为出色,生成的视频能保持特定风格和原有的运动模式。

根据技术主页展示的演示效果来看,OmniHuman的生成效果已经具有较高的自然度。为防止该项技术被不当利用,字节跳动技术团队在主页中特别标注称,OmniHuman将不会对外提供下载。

即梦AI相关负责人透露,该模型目前已具备较好的表现,但在生成影视真实级别的视频上仍存在一定的提升空间。

由其支持的多模态视频生成功能会在即梦上以小范围内测的形式进行调优调整,并逐步开放。

该负责人同时表示,即梦还会对这一功能设置严格的安全审核机制,并且对输出的视频标注水印以作提醒,从而确保AI发挥正面、积极的作用,助力视频创作者更好地实现想象力的表达。

本周热门攻略

1
青柠影院在线观看《荣耀》高清电视剧,畅享无忧观剧体验

青柠影院在线观看《荣耀》高清电视剧,畅享无忧观剧体验

2025/03/12

2
XX X18HDHD:凭借高性能与超强性价比,迅速成为市场热销产品

XX X18HDHD:凭借高性能与超强性价比,迅速成为市场热销产品

2025/03/13

3
如何玩转“一个 b 一个 3人个人玩法”?让你的游戏体验更加丰富与刺激!

如何玩转“一个 b 一个 3人个人玩法”?让你的游戏体验更加丰富与刺激!

2025/03/14

4
《一家乱战》第07集:家庭冲突愈演愈烈,角色成长和情感纠葛引发观众共鸣

《一家乱战》第07集:家庭冲突愈演愈烈,角色成长和情感纠葛引发观众共鸣

2025/03/16

5
抖阴是什么?你需要知道的关于抖阴的基本信息和使用技巧

抖阴是什么?你需要知道的关于抖阴的基本信息和使用技巧

2025/03/18

6
为什么越来越多人选择一个人看WWW在线视频直播?揭秘背后的原因及优势

为什么越来越多人选择一个人看WWW在线视频直播?揭秘背后的原因及优势

2025/03/10

7
电影《妈妈你真棒》插曲《快来救救我》带来的情感震撼:为何这首歌成了影片的灵魂?

电影《妈妈你真棒》插曲《快来救救我》带来的情感震撼:为何这首歌成了影片的灵魂?

2025/03/15

8
《星空无限》第二季高清免费观看,究竟有何亮点让影迷疯狂追剧?

《星空无限》第二季高清免费观看,究竟有何亮点让影迷疯狂追剧?

2025/03/12

9
狂野少女免费观看完整电视高清版,精彩内容一网打尽,绝对满足你对电影的所有期待!

狂野少女免费观看完整电视高清版,精彩内容一网打尽,绝对满足你对电影的所有期待!

2025/03/14

10
《姐妹7完整版》:这部剧为何能在观众中引起强烈共鸣?

《姐妹7完整版》:这部剧为何能在观众中引起强烈共鸣?

2024/12/29