阿里推出AI视频生成框架Tora
创始人
2024-08-05 14:36:32
0

三言科技 8月5日消息,近日,阿里团队推出AI视频生成框架Tora。据介绍,这是第一个面向轨迹的DiT框架,该框架同时集成了文本、视觉和轨迹条件以进行视频生成。

具体来说,Tora由一个轨迹提取器(TE)、一个时空DiT和一个运动引导熔融器(MGF) 组成。TE使用3D视频压缩网络将任意轨迹编码为分层时空运动补丁。MGF将运动贴片集成到DiT模块中,以生成遵循轨迹的连贯视频。Tora的设计与DiT的可扩展性无缝契合,允许精确控制具有不同持续时间、宽高比和分辨率的视频内容。在实现高运动保真度方面表现出色,而且可以细致地模拟物理世界动态。相关论文已发布在arXiv上。

目前,Tora项目主页仅提供视频演示。

相关内容

腾讯科技申请网络内容页面快...
国家知识产权局信息显示,腾讯科技(深圳)有限公司申请一项名为“页面...
2026-01-17 20:19:05
原创 ...
文|唐辰 图注:千问App产品发布会现场 唐辰现场拍摄 阿里千问打...
2026-01-17 16:18:13
新华读报|警惕!AI 给你...
《新华每日电讯》1月17日刊发文章《AI给出的搜索结果,可信吗?》...
2026-01-17 11:46:44
原创 ...
如果 Agent领域也有吉尼斯纪录,那千问大概能拿下全球最能「办事...
2026-01-17 11:46:12
预告:PPIO创始人姚欣1...
雷递网 乐天 1月17日 由雷递网主办的《2026光谷AI产业发展...
2026-01-17 09:47:43
美政府推动科技巨头为AI用...
据美国方面16日消息,由于人工智能产业发展加大了用电需求,美国政府...
2026-01-17 08:47:13

热门资讯

原创 2... #春日生活好物种草季#近年来,笔记本电脑市场迎来技术爆发期,尤其在手机厂商跨界入局后,轻薄本在性能、...
AMD锐龙AI 9 HX 37... 2024年6月3日,AMD正式发布全新的锐龙AI 300系列处理器。该系列处理器一经发布就引发大家的...
2024云栖大会|阿里云升级无... 北京商报讯(记者魏蔚)9月20日,阿里云无影AI云电脑在2024云栖大会上展出,该版本基于最新的终端...
5个AI模特生成软件推荐 当前AI模特生成软件市场提供了多样化的解决方案,以下是几款备受推崇的工具: 触站AI:强烈推荐!...
骁龙本这么猛?联想YOGA A... 在人人都是自媒体的时代,一部手机可以解决出镜拍摄问题,而商务出差、大量码字、图像处理等需求用笔记本则...
2023年CentOS与Ubu... CentOS与Ubuntu的市场格局与技术特性探讨 在服务器操作系统领域,CentOS与Ubuntu...
MWC2025荣耀多款AI技术... 人民财讯3月6日电,2025世界移动通信大会(MWC 2025)上,荣耀MagicBook Pro ...
苹果macOS 15.1:允许... 苹果公司在其最新的macOS 15.1版本中,推出了一项引人注目的新功能——允许用户将Mac App...
原创 苹... 前言 IQUNIX在做好看的桌面产品上,一直都给我留下非常深刻的印象。而且早期和苹果产品的设计风格...
原创 华... 在2024年这个被誉为"AI元年"的关键时刻,随着生成式AI的流行,各家手机厂商都在积极备战AI手机...