数字生命卡兹克 02月24日
全网首发|一手内测字节OmniHuman-1,这就是当今最强的AI数字人。
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

字节跳动OmniHuman-1模型引领AI视频进入新时代。只需一张图+一段音频,即可生成超逼真、唇形同步的全身动态AI视频。告别了只能生成面部动画的局限,实现了背景动态和全身动作的完美结合。通过即梦平台体验内测,人物表演告别默剧,一键生成带表演和口型的15秒视频,如同语音技术从TTS到端到端的进化。角色审核严格,支持多种比例图片,结合海螺AI生成语音,效果惊艳。奥特曼花式表演、miku酱弹吉他等案例展示了其强大能力,多人视频也成为可能。AI深度参与表演和叙事,或将重构影视、动画、广告和直播等行业。

✨OmniHuman-1模型突破:字节跳动的OmniHuman-1模型通过一张图+一段音频,生成超逼真、唇形同步的全身动态AI视频,解决了以往AI视频只能生成面部动画的局限。

🎭即梦平台内测体验:该模型已在即梦平台上线内测,用户可以通过大师模式,一键生成带表演和口型的15秒视频,无需复杂的动画和后期合成,极大地降低了创作门槛。

🎤结合海螺AI语音:为了获得更佳的音频效果,建议结合海螺AI生成语音,实现完美的声音克隆,从而为AI视频赋予更生动的表达能力。

🎬应用场景广泛:该技术不仅限于单人视频,还支持多人场景,为AI女团等创意内容提供了可能性,预示着影视、动画、广告等行业可能因此被重构。

原创 数字生命卡兹克 2025-02-22 00:25 北京

一张图+一段音频=最拟真AI视频。

半个月前,字节的OmniHuman-1模型在全球的AI圈,都掀起了巨浪。

可能有些朋友不知道这是个啥,我大概通俗易懂的解释一下:

一张图+一段音频,就能生成超逼真的唇形同步AI视频。

听起来好像是不是之前已经有了?没毛病,这种AI视频我们一般称为对照片说话,我自己之前也写过:3分钟用AI让照片开口说话,去造属于自己的梦吧。

那时候的效果是这样的:

说实话,这个效果已经很不错了,但是有个最大的问题,就是只能生成面部或者头部的动画,背景、肢体全都没法动,非常的尴尬。

而这一次,OmniHuman-1做了巨幅的突破,一张照片+一段音频,就可以生成背景是动态、支持全身动作的视频,甚至还能保证口型同步。

在我心中,这好像才是真正的Sora该有的样子。

而我等啊等啊等啊。

终于,在今天深夜,我等来了OmniHuman-1的内测。

这一次,他们把这个模型也放在了老朋友即梦上。

视频生成中的对口型上的大师模式,就是OmniHuman-1。

三种模式的描述对比一下:

在我玩了2个小时后,我只能感叹一句:

AI视频中的人物表演,也终于走进了下一个时代。

视频中的人物,再也不是默剧了,让人物开口说话也终于不用先跑一段动态AI视频再换口型了。

只需要一键,就直接生成一段带表演的、带口型的15秒视频。

这就像当年的语音,从TTS,进化到了端到端的声音一样。

酷到爆炸了好吗。

给大家看下怎么用,真的巨简单。

首先,你需要准备一张人物角色图和一段音频。

图的话没啥需要注意的,不同于之前的生动模式会强制剪裁,现在的OmniHuman-1支持任何比例,同时我自己测试下来,有个问题比较大,就是角色的审核非常严格。

猫猫狗狗之类的动物不能生存我能理解,但是一些拟人角色,或者稍微侧面一点的,都显示未检测到可用角色,比如我传这个哪吒的图:

就会显示这个:

这个我觉得就有一点问题,我就去直接问了下产品经理,是BUG,还是模型特性。产品的回复是:

至于音频的话,除了真人配音之外,如果想用AI生成,我比较建议去海螺AI,目前我觉得最强的AI语音。我曾经也写过一篇文章介绍:30秒就能完美复刻你的声音,这就是当今最强的中文AI语音克隆。

https://hailuoai.com/audio

全部准备就绪上传之后,你只要,点击生成就可以了。

比如我准备了一张哪吒的图片,和一段哪吒2里非常经典的语音。

来自数字生命卡兹克音频:哪吒台词

然后,他两直接合成了一段,AI哪吒念诗。

这效果,虽然有一些瑕疵,而且不能跟哪吒2原片段比,但是已经是我见过的,表演最好的了,毕竟你要是真能跟哪吒2片段打个平手。。。

那...AI对于影视的冲击...

我又整了个活,让奥特曼...来搞个花的。

这个运动非常夸张,不仅奥特曼自己的表演是到位的,背景里面的行人也是匆匆,左右穿越,稳得一笔。

又或者这个miku酱弹吉他。

太牛逼了。

再放几个跑的case。

甚至不止单人,连多人...都可以。

AI女团有望。

从以前要调动画、找配音、做后期合成,至少得个把星期的工作量,如今十几秒钟就能完成,还能批量跑,简直让人不敢相信这是现实。

说实话,这就是我心里那个AI视频2.0时代的标志。

人物不仅动了,还能用自然语音去表达信息,真正把视频当做核心载体,让AI深度参与到表演和叙事中。

这样的想法放在半年前,像极了天方夜谭,可它如今就真实地摆在你面前。

再往后,我们也许要重新思考。

影视、动画、广告、甚至直播,这些传统概念,会不会因为一个AI,而统统被打碎重构?

相信,结论,都在大家的心中。

只是时间上的尺度有不同而已。

科技的长河滚滚向前。

从来不会等待,任何人。

以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。

>/ 作者:卡兹克

>/ 投稿或爆料,请联系邮箱:wzglyay@gmail.com

阅读原文

跳转微信打开

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

OmniHuman-1 AI视频 即梦 海螺AI 人工智能
相关文章