linux办公网
阿里推出AI视频生成框架Tora
创始人
2024-08-05 14:36:32
0次

三言科技 8月5日消息，近日，阿里团队推出AI视频生成框架Tora。据介绍，这是第一个面向轨迹的DiT框架，该框架同时集成了文本、视觉和轨迹条件以进行视频生成。

具体来说，Tora由一个轨迹提取器（TE）、一个时空DiT和一个运动引导熔融器（MGF） 组成。TE使用3D视频压缩网络将任意轨迹编码为分层时空运动补丁。MGF将运动贴片集成到DiT模块中，以生成遵循轨迹的连贯视频。Tora的设计与DiT的可扩展性无缝契合，允许精确控制具有不同持续时间、宽高比和分辨率的视频内容。在实现高运动保真度方面表现出色，而且可以细致地模拟物理世界动态。相关论文已发布在arXiv上。

目前，Tora项目主页仅提供视频演示。

科技 轨迹 时空 集成 运动 消息 视频 Tora 框架 阿里 三言科技 DiT

上一篇：恒拓开源下跌5.04%，报6.4元/股

下一篇：界环AI音频眼镜即将发布 现已开启一元盲定超值活动

相关内容

京东开源JoyAI-Vid...
快科技8月5日消息，京东正式开源自研实时流式视频编辑模型JoyAI...
2026-08-05 17:17:32
京东开源实时流式视频编辑模...
8月5日，京东宣布开源自研的实时流式视频编辑模型JoyAI-Vid...
2026-08-05 17:06:20
AI赋能包 | 产品介绍⑪...
产品介绍 短视频AI剪辑与碰一碰批量发布系统是一套面向企业短视频矩...
2026-08-03 20:19:24
开放通用智能，MiniMa...
8月3日，据MiniMax消息，MiniMax正式开源新一代通用视...
2026-08-03 20:02:14
商汤科技开源多模态模型Se...
IT之家 8 月 3 日消息，商汤科技今日宣布，面向社区开源轻量级...
2026-08-03 20:01:37
MiniMax开源H3，视...
长期封闭的视频模型赛道，出现了一个开源旗舰。 7月31日，Mini...
2026-08-03 19:59:29

热门资讯

“AI小法官”提升法治教育实效 原标题：福建省厦门市康乐第二小学推动人工智能与法治教育融合——“AI小法官”提升法治教育实效 “偷看...
限制AI发挥的，可能不是算法，...
开源证券：给予国邦医药买入评级 开源证券股份有限公司近期对国邦医药进行研究并发布了研究报告《公司信息更新报告：收入稳健增长，动保业务...
京东开源JoyAI-Video... 快科技8月5日消息，京东正式开源自研实时流式视频编辑模型JoyAI-Video-Edit，打破传统视...
AI不再用完即忘：华为诺亚开源... 2026年8月3日，华为诺亚方舟实验室正式开源MindMemOS——一个面向AI Agent的可迁移...
京东开源实时流式视频编辑模型J... 8月5日，京东宣布开源自研的实时流式视频编辑模型JoyAI-Video-Edit。据悉，用户可以一边...
NVIDIA发布新功能分支Un... IT之家 8 月 4 日消息，NVIDIA 当地时间昨日发布了版本号为 610.57.04 的新功能...
开源证券：维持陆家嘴“买入”评... 开源 证券研报指出， 陆家嘴中期业绩大幅增长，租赁现金流入稳中有增。公司2026H1实现归母净利润1...
韩国启动全民AI成长阶梯项目，... 2026年8月3日，韩国科学技术信息通信部正式启动全民AI成长阶梯项目，项目整合全民AI学习馆、全民...
从全民AI入门到创业孵化，韩国... 8月3日，财闻海外资讯消息，韩国科学技术信息通信部正式启动全民AI成长阶梯项目，整合全民AI学习馆、...