36kr 2024年08月21日
英伟达投的Sora竞品飞速上新,一手实测这就奉上
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Luma AI推出了Dream Machine 1.5代,升级后的版本更加智能,支持文生视频功能,用户可以输入文字描述生成视频。新版本已开放全民在线体验,网友纷纷表示效果“incredible”。

🚀 **文生视频效果升级**:Luma AI的Dream Machine 1.5代在文生视频方面取得了重大突破,用户可以通过输入文字描述生成视频。例如,输入“FPV,快速移动的镜头,以光速飞过房屋,然后爆炸成火山”,可以生成一个充满视觉冲击力的视频,堪比电影运镜的快镜头。

🎨 **克服了文字在画面上的显示难题**:以往AI视频生成工具在画面上添加文字存在很大挑战,而Dream Machine 1.5代克服了这一难题。例如,输入“动态运动,垂直2面板分屏视图:上面茂密的丛林树冠,下面的水下珊瑚礁,超高清,自然纪录片风格”,可以生成一个上下分屏的视频,将丛林和海底世界完美拼接在一起。

📈 **用户访问数据领先**:Luma AI在国外AI视频生成工具中用户访问数据领先。根据Similarweb的统计,7月份全球访问量达到2260万次。

💰 **强大投资背景**:Luma AI由英伟达投资,联合创始人兼CEO Amit Jain是前苹果AR/CV工程师,联合创始人兼CTO Alex Yu是加州伯克利大学毕业生,曾与Angjoo Kanazawa教授一起研究NeRF相关的3D计算机视觉。

🏆 **技术实力过硬**:Luma AI在技术方面拥有强大的实力,团队成员来自苹果、加州伯克利大学等知名机构,拥有丰富的经验和技术积累。

在AI视频赛道卷麻了之际,英伟达投的Sora竞品,马不停蹄地推出1.5代了!

据Luma创始成员介绍,相比6月推出的Dream Machine 1.0,此次升级主要围绕文生视频,整体更加智能。

新版本全民在线可玩,已经尝鲜的网友纷纷直呼:

incredible!(不可思议)

看了下网友试玩,目前的效果雀食不错,下面挑几个例子康康(PS:画质均有一定压缩)

鸡蛋成精了,会骑车的流心蛋黄:

视觉冲击力强,堪比电影运镜的快镜头。

Prompt:FPV, fast moving footage, at light speed, flying through houses before exploding into a volcano.(FPV,快速移动的镜头,以光速飞过房屋,然后爆炸成火山。)

画面上加文字的老大难,貌似也克服了。

上下分屏,丛林和海底世界刷一下就拼接起来了:

Dynamic motion, vertical 2-panel Split-screen view: lush jungle canopy above, underwater coral reef below, UHD, nature documentary style(动态运动,垂直2面板分屏视图:上面茂密的丛林树冠,下面的水下珊瑚礁,超高清,自然纪录片风格)

衣袂飘飘,自然抬头的少女漫也安排上了。‍

看完这波效果,不难推测为何Luma AI在过去两个月增长迅猛。

网站分析平台Similarweb的数据显示,目前它在所有AI视频中(主要是国外产品)访问量排第一,仅7月份全球访问量达到了2260万次。

实测1.5代

手痒了,量子位第一时间也来试一下Dream Machine v1.5。为了顺带检验官方demo的真实性,咱们直接微调一下官方提示词。(机智如我)

直接看重头戏——文生视频。

第一个,将原玄幻场景中的老头换成了老太太。从生成结果来看,基本要素都齐了,但是细节之处(如手部畸变)还是不能看。

prompt:old woman with a swirling fireball(手持旋转火球的老妇人)

第二个,将考察视频运动能力的原绿色puppy换成了猫咪。这个效果相当不错,猫咪大佬的气质简直扑面而来!不仅烟雾在空中的运动轨迹非常逼真,而且猫咪的耳朵还会动。

prompt:green cat smoking a cigar(抽烟的小猫咪)

第三个,将考察视频添加文字能力的原“WOW”换成了”STOP”。整体倒是挺自然,但是犯了一个致命错误:单词拼错了。(且这个视频生成最耗时)

prompt:“STOP” in balloons in the sky(”STOP”出现在天空中的气球上)

对了,知道大家肯定会被提示词难倒,有网友已经贴心整理好了大礼包。(文末链接可取)

来自Luma AI

Dream Machine是由英伟达投资的Sora竞品,背后公司是Luma AI

联合创始人兼CEO Amit Jain是前苹果AR/CV工程师;联合创始人兼CTO Alex Yu 2021年毕业于加州伯克利,曾与Angjoo Kanazawa教授一起研究NeRF相关的3D计算机视觉。

最近一轮融资是在今年1月(B轮4300万美元),a16z领投,Anjey Midha、Amplify、Matrix、NVIDIA、South Park Commons等参投。

而且在国外一众AI视频生成工具中,用户访问数据较好。

根据Similarweb的统计,当前Luma AI领先于许多类似的AI视频生成应用。7月份全球访问量达到2260万次。

试玩地址给大家放文末了,欢迎来波反馈~

体验地址:https://lumalabs.ai/dream-machine/creations

参考链接:

[1]https://x.com/LumaLabsAI/status/1825639918539817101

[2]https://x.com/SwayMolina/status/1825651049904144591

[3]https://x.com/Similarweb/status/1822967997582958659

本文来自微信公众号“量子位”,作者:一水,36氪经授权发布。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

Luma AI Dream Machine 文生视频 AI视频生成 Sora竞品
相关文章