阿里推出AI视频生成框架Tora
创始人
2024-08-05 14:36:32
0

三言科技 8月5日消息,近日,阿里团队推出AI视频生成框架Tora。据介绍,这是第一个面向轨迹的DiT框架,该框架同时集成了文本、视觉和轨迹条件以进行视频生成。

具体来说,Tora由一个轨迹提取器(TE)、一个时空DiT和一个运动引导熔融器(MGF) 组成。TE使用3D视频压缩网络将任意轨迹编码为分层时空运动补丁。MGF将运动贴片集成到DiT模块中,以生成遵循轨迹的连贯视频。Tora的设计与DiT的可扩展性无缝契合,允许精确控制具有不同持续时间、宽高比和分辨率的视频内容。在实现高运动保真度方面表现出色,而且可以细致地模拟物理世界动态。相关论文已发布在arXiv上。

目前,Tora项目主页仅提供视频演示。

相关内容

原创 ...
目前 iOS 微信又上线了新功能:小微。 我们进入微信主界面,之前...
2026-06-20 18:26:20
英特尔开源版图持续收缩:A...
6月13日消息,英特尔正在持续推进其开源项目的收缩。Phoroni...
2026-06-20 18:24:26
人大主办!全球青年科学家共...
智东西 作者 | ZeR0 编辑 | 漠影 智东西5月31日报道,...
2026-06-20 12:53:20
AI独角兽MiniMax要...
IT之家 5 月 31 日消息,人工智能公司 MiniMax Gr...
2026-06-01 00:51:13
小米开源可控视频音效生成模...
IT之家 5 月 29 日消息,小米大模型应用团队今日发布 Con...
2026-06-01 00:41:13
鸿蒙生态设备超13亿台,开...
PChome 5月28日消息,2026开源鸿蒙开发者大会正式召开,...
2026-05-30 05:44:37

热门资讯

2024云栖大会|阿里云升级无... 北京商报讯(记者魏蔚)9月20日,阿里云无影AI云电脑在2024云栖大会上展出,该版本基于最新的终端...
MWC2025荣耀多款AI技术... 人民财讯3月6日电,2025世界移动通信大会(MWC 2025)上,荣耀MagicBook Pro ...
原创 2... #春日生活好物种草季#近年来,笔记本电脑市场迎来技术爆发期,尤其在手机厂商跨界入局后,轻薄本在性能、...
摩尔线程发布AI算力笔记本MT... 钛媒体App 12月20日消息,摩尔线程创始人、董事长兼CEO张建中在摩尔线程首届MUSA开发者大会...
摩尔线程AI生图摩笔马良全新升... 快科技8月7日消息,作为国产GPU的杰出代表,摩尔线程在当下火爆的AIGC浪潮中也推出了自己的软硬一...
微软 Azure AI 语音服... IT之家 8 月 23 日消息,微软Azure AI 语音服务允许开发者构建多语言生成式 AI 语音...
谷歌打磨 Gemini AI ... IT之家 8 月 31 日消息,谷歌于 8 月 27 日发布博文,宣布旗下 Gemini AI 支持...
青云QingCloud Kub... 日前,青云科技宣布开源 Thanos 的企业级发行版 Whizard,为企业带来真正高可用、可扩展、...
Macos系统上一款强大的卸载... App Cleaner mac中文版是Mac os系统上一款强大 的mac卸载工具,以帮助您完全卸载...
AMD锐龙AI 9 HX 37... 2024年6月3日,AMD正式发布全新的锐龙AI 300系列处理器。该系列处理器一经发布就引发大家的...