阿里推出AI视频生成框架Tora
创始人
2024-08-05 14:36:32
0

三言科技 8月5日消息,近日,阿里团队推出AI视频生成框架Tora。据介绍,这是第一个面向轨迹的DiT框架,该框架同时集成了文本、视觉和轨迹条件以进行视频生成。

具体来说,Tora由一个轨迹提取器(TE)、一个时空DiT和一个运动引导熔融器(MGF) 组成。TE使用3D视频压缩网络将任意轨迹编码为分层时空运动补丁。MGF将运动贴片集成到DiT模块中,以生成遵循轨迹的连贯视频。Tora的设计与DiT的可扩展性无缝契合,允许精确控制具有不同持续时间、宽高比和分辨率的视频内容。在实现高运动保真度方面表现出色,而且可以细致地模拟物理世界动态。相关论文已发布在arXiv上。

目前,Tora项目主页仅提供视频演示。

相关内容

【用AI联通】AI“爆改”...
人工智能时代,AI已成为推动农业现代化发展的关键力量之一,从茉莉花...
2025-07-09 10:43:14
科技遇见艺术 AI描绘黄河
河南日报客户端记者 王铮 实习生 李家旭 7月8日,一场探索人工智...
2025-07-08 23:12:00
钉钉发布全新“AI表格”
钛媒体App 7月8日消息,钉钉今日发布全新AI表格,面向AI时代...
2025-07-08 11:41:21
AI时代须防范技术滥用
本报记者 孙奇茹 原本用来提高人类效率的AI工具被用来产出各种以假...
2025-07-08 09:43:30
建邦科技:7月4日接受机构...
证券之星消息,2025年7月7日建邦科技(837242)发布公告称...
2025-07-08 09:42:26
北京人形机器人创新中心开源...
新京报贝壳财经讯(记者韦博雅)7月7日,北京人形机器人创新中心正式...
2025-07-08 09:11:29

热门资讯

原创 2... #春日生活好物种草季#近年来,笔记本电脑市场迎来技术爆发期,尤其在手机厂商跨界入局后,轻薄本在性能、...
AMD锐龙AI 9 HX 37... 2024年6月3日,AMD正式发布全新的锐龙AI 300系列处理器。该系列处理器一经发布就引发大家的...
骁龙本这么猛?联想YOGA A... 在人人都是自媒体的时代,一部手机可以解决出镜拍摄问题,而商务出差、大量码字、图像处理等需求用笔记本则...
5个AI模特生成软件推荐 当前AI模特生成软件市场提供了多样化的解决方案,以下是几款备受推崇的工具: 触站AI:强烈推荐!...
2023年CentOS与Ubu... CentOS与Ubuntu的市场格局与技术特性探讨 在服务器操作系统领域,CentOS与Ubuntu...
苹果macOS 15.1:允许... 苹果公司在其最新的macOS 15.1版本中,推出了一项引人注目的新功能——允许用户将Mac App...
原创 苹... 前言 IQUNIX在做好看的桌面产品上,一直都给我留下非常深刻的印象。而且早期和苹果产品的设计风格...
原创 华... 想在竞争残酷的市场中发力,必须要带来一些激进的卖点,但是随着功能特性的提升,硬件也必须要进行给力才可...
原创 华... 在2024年这个被誉为"AI元年"的关键时刻,随着生成式AI的流行,各家手机厂商都在积极备战AI手机...