阿里推出AI视频生成框架Tora
创始人
2024-08-05 14:36:32
0

三言科技 8月5日消息,近日,阿里团队推出AI视频生成框架Tora。据介绍,这是第一个面向轨迹的DiT框架,该框架同时集成了文本、视觉和轨迹条件以进行视频生成。

具体来说,Tora由一个轨迹提取器(TE)、一个时空DiT和一个运动引导熔融器(MGF) 组成。TE使用3D视频压缩网络将任意轨迹编码为分层时空运动补丁。MGF将运动贴片集成到DiT模块中,以生成遵循轨迹的连贯视频。Tora的设计与DiT的可扩展性无缝契合,允许精确控制具有不同持续时间、宽高比和分辨率的视频内容。在实现高运动保真度方面表现出色,而且可以细致地模拟物理世界动态。相关论文已发布在arXiv上。

目前,Tora项目主页仅提供视频演示。

相关内容

AI眼中的好房子:“舒适”...
提问:如果你是人类,你理想中的好房子什么样? DeepSeek: ...
2025-03-15 06:41:16
原创 ...
据新京报报道,有记者提问,台媒披露,“台独”顽固分子沈伯洋不仅拥有...
2025-03-14 21:13:02
新点软件:基于华为等多家开...
金融界3月14日消息,有投资者在互动平台向新点软件提问:你好!请问...
2025-03-14 17:12:09
潍坊潍城青年路小学AI赋能...
近日,潍坊市、区两级信息科技教研员莅临潍城区青年路小学开展教学指导...
2025-03-14 17:11:58
前瞻全球产业早报:AI眼镜...
AI眼镜行业或进入爆发元年 近日,市场对于AI(人工智能)穿戴设备...
2025-03-14 08:13:56
AI产业热潮不减
【深圳商报讯】(首席记者 谢惠茜)虽然算力以及人工智能板块迎来回调...
2025-03-14 08:13:13

热门资讯

原创 华... 想在竞争残酷的市场中发力,必须要带来一些激进的卖点,但是随着功能特性的提升,硬件也必须要进行给力才可...
支持 AI 扩图,华为 Pur... 2024-07-28 09:05:02作者:姚立伟 华为Pura 70 Pro手机今日推出鸿蒙Ha...
苹果macOS 15.1:允许... 苹果公司在其最新的macOS 15.1版本中,推出了一项引人注目的新功能——允许用户将Mac App...
吞噬星空维妮娜美图/高清壁纸/... 国漫女神|《吞噬星空》维妮娜美图/高清壁纸/AI手机壁纸/无水印 国漫女神|《吞噬星空》维妮娜美图...
原创 苹... 前言 IQUNIX在做好看的桌面产品上,一直都给我留下非常深刻的印象。而且早期和苹果产品的设计风格...
原创 商... 最近,各家的AI 9笔记本开始陆续登场,其实大家并不一定非选AI 9 HX 370,主要是这颗CPU...
AI智能+高效清洁!萤石RS2... 目前扫拖机器人市场的竞争非常激烈,在上下水扫拖一体机市场也出现了很多所谓的创新产品。但是对于这些产品...
2024年度中国银行业发展报告... 21世纪经济报道 记者李愿 北京报道 10月19日,中国银行业协会在2024金融街论坛年会·金融街之...