机器之心 2024年11月24日
RTX 4090可跑、完全开源,最快视频生成模型问世,实测一言难尽
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Lightricks公司推出全新开源AI视频生成模型LTX-Video,该模型以其惊人的速度和高质量著称。它可以在4秒内生成5秒的24FPS视频,分辨率为768x512,生成速度甚至超过观看速度。LTX-Video完全开源,包括代码库和模型权重,用户可以在GitHub和Hugging Face上体验。该模型基于文本或图像生成视频,可在消费级GPU上运行,无需专用设备即可生成高质量视频。LTX-Video还注重细节,最大程度减少闪烁和伪影,并实现跨帧一致性,提供自然逼真的视频效果。

🚀LTX-Video是首个实时生成高质量视频的DiT模型,在Nvidia H100上仅需4秒即可生成5秒24FPS、768x512分辨率的视频,生成速度远超预期。

💻LTX-Video完全开源,包括代码库和模型权重,用户可以在GitHub和Hugging Face上体验预览版,完整版将免费供个人和商业使用,并即将集成到LTX Studio中。

💡LTX-Video基于文本或图像生成视频,可在RTX 4090等消费级GPU上运行,无需专用设备即可生成高质量视频,降低了视频生成的门槛。

🖼️LTX-Video在生成过程中最大程度减少了闪烁和伪影,并实现跨帧一致性,使生成的视频画面清晰锐利,细节丰富,视觉效果出色。

🔄LTX-Video可以流畅地集成各种外部工具,增强工作流,并提供自然逼真的结果,满足用户对视频生成的多样化需求。

2024-11-24 12:45 北京

生成速度比观看速度还快。

机器之心报道

编辑:杜伟

开源 AI 视频社区又一个重量级选手下场。


这个周末,押注开源人工智能视频的初创公司 Lightricks,有了重大动作。


该公司推出了最快的视频生成模型 LTX-Video,它是首个可以实时生成高质量视频的 DiT 视频生成模型



在一块 Nvidia H100 上,LTX-Video 只需要 4 秒就能生成 5 秒时长的 24FPS 视频,分辨率 768x512,可以说视频生成速度比视频观看速度还要快。同时 LTX-Video 完全开源,包括代码库和模型权重。


LTX-Video共同作者和负责人。


「有史以来最快的文生视频模型诞生了。」



首先来看几个视频生成官方 Demo。





目前,用户可以在 GitHub Hugging Face 上体验预览版 LTX Video。完整版发布之后将免费供个人和商业使用,并即将集成到 LTX Studio 中。



项目地址:https://github.com/Lightricks/LTX-Video


我们尝试生成了两个视频,比如「a dog chasing a boy who is skateboarding」。



再比如「a girl with an umbrella standing on a bridge, and a handsome man walking towards her」。



试用地址:https://huggingface.co/spaces/akhaliq/anychat


接着来了解一下 LTX-Video 的细节。


LTX Video 是一个文本到视频和图像到视频模型,能够以惊人的速度和精度实时创建动态视频。该模型可以在 RTX 4090 等消费级 GPU 上本地运行,无需专用设备即可以低成本地生成高质量视频。


另外,LTX Video 基于开发人员的反馈和真实世界用例构建,可以提供自然逼真的结果。该模型做了高级定制化设计,可以流畅地集成各种外部工具,从而轻松地增强工作流。


在生成过程中,LTX Video 最大程度减少了闪烁和伪影,创建出具有出色细节和清晰度的高保真视频。每一帧都在精心制作下呈现清晰锐利、栩栩如生,符合用户的视觉效果。


最后,LTX Video 实现了无缝的跨帧一致性,从角色到环境,可以保持连贯的视觉效果,将每个细节整合在一起。


未来,LTX-Video 还会有技术报告放出。




© THE END 

转载请联系本公众号获得授权

投稿或寻求报道:liyazhou@jiqizhixin.com


跳转微信打开

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

LTX-Video AI视频生成 开源 实时生成 视频模型
相关文章