🎬Tora是阿里团队推出的AI视频生成框架，它基于轨迹导向的扩散变换器（DiT）技术，集成了文本、视觉和轨迹条件来生成视频。其中，轨迹提取器（TE）使用3D视频压缩网络将任意轨迹编码为分层时空运动补丁。
💻Tora中的运动引导融合器（MGF）将运动贴片集成到DiT模块中，以生成遵循轨迹的连贯视频。Tora无缝契合DiT设计，支持制作最长204帧、720P分辨率的视频，可精确控制视频的多种参数。
🌟大量实验证明，Tora在实现高运动保真度方面表现出色，同时还能细致模拟物理世界的运动。其独特的设计理念融合多种条件，精准控制视频内容，为电影特效制作、虚拟现实等领域带来无限可能。
IT之家 8 月 6 日消息，阿里团队最新推出了 AI 视频生成框架 Tora，同时集成了文本、视觉和轨迹条件用于生成视频，是基于轨迹导向的扩散变换器（DiT）技术。
Tora 由一个轨迹提取器（TE）、一个时空 DiT 和一个运动引导融合器（MGF）组成：
TE 使用 3D 视频压缩网络将任意轨迹编码为分层时空运动补丁。
MGF 将运动贴片集成到 DiT 模块中，以生成遵循轨迹的连贯视频。
Tora 无缝契合 DiT 设计，支持制作最长 204 帧、720P 分辨率的视频，可以精确控制不同持续时间、宽高比和分辨率的视频内容。大量实验证明，Tora 在实现高运动保真度方面表现出色，同时还能细致模拟物理世界的运动。
其独特设计理念融合文本、视觉和轨迹条件，精准控制视频内容，模拟物理世界运动规律，为电影特效制作、虚拟现实领域带来无限可能。
IT之家附上参考地址
AI辅助创作，多种专业模板，深度分析，高质量内容生成。从观点提取到深度思考，FishAI为您提供全方位的创作支持。新版本引入自定义参数，让您的创作更加个性化和精准。
鱼阅，AI 时代的下一个智能信息助手，助你摆脱信息焦虑