快手北大联手开源视频模型Pyramid-Flow :可生成10秒超高清视频
创始人
2024-10-12 09:56:09
0

最近,快手和北京大学以及北京邮电大学的研究团队共同开源了一个名为 Pyramid-Flow 的超高清视频生成模型。

这个模型能够通过文本描述生成最高10秒、1280x768分辨率、24帧的视频,质量相当出色,光影效果、动作一致性、视频质量等方面表现都很不错。

Pyramid Flow 的工作原理与现有的视频扩散模型不同。现有模型通常在全分辨率下运行,这样做虽然能产生高质量的结果,但却消耗了大量计算资源。而 Pyramid Flow 则采用了流匹配的灵活性,可以在不同分辨率和噪声水平之间进行插值,这样就能更高效地生成和解压缩视频内容。

这一切都通过一个名为 DiT 的单一框架进行优化,大大缩短了训练时间。Pyramid-Flow 在 A100GPU 上仅经过了20,700小时的训练,能耗和效率远超市面上的同类模型。这对于那些没有庞大算力的中小企业和个人开发者来说,无疑是一个巨大的助力。

Pyramid-Flow 的创新之处在于它采用了一种名为金字塔流匹配的技术。这种方法将视频生成分解为多个不同分辨率的阶段,开始时生成低分辨率的草图,然后逐步提升到高分辨率。这样的设计既降低了计算负担,又提高了生成的灵活性。每个阶段都是从一个像素化的噪声表示演变而来,直到变得清晰。为了确保每个阶段之间的连续性,算法在过渡时会重新引入一些噪声。

此外,模型还利用自回归框架和块状因果注意力机制,使每一帧都能基于之前的帧进行生成,确保视频的连贯性和逻辑性。

在性能方面,Pyramid Flow 在各大比较平台上都表现优异。与市面上的一些商业模型相比,尽管它只使用了公共视频数据,但在质量和流畅度评分上都不遑多让。此外,通过用户调查发现,参与者普遍对 Pyramid Flow 的生成效果表示满意,尤其是在视频的运动平滑度方面,表现更加出色。

无论是想要生成精彩的视频内容的创作者,还是在探索新技术的研究者,Pyramid Flow 都为他们提供了一个高效、易用的选择。

相关内容

AI超节点硬件架构演进趋势
通信世界网消息(CWW) 新华三集团云与计算存储产品线 汪新新 随...
2026-08-18 10:32:17
估值 5 倍暴涨:Web3...
据 Woofun AI 消息,8 月 16 日,美国支付巨头 St...
2026-08-18 10:31:48
营收增长13倍!AI大模型...
近期,海内外AI大模型厂商的商业化迎来积极进展。 海内外AI大模...
2026-08-18 06:55:41
兰建平:开源成为中国主导A...
中新网杭州8月17日电(鲍梦妮)千问系列全球下载量破10亿次,衍生...
2026-08-17 23:22:21
少看AI博主,多用AI工作
没用上最好的 AI 模型,是不是就落后于时代了? 公司没有搭建出一...
2026-08-17 17:53:55
AI原生组织进入实战阶段:...
8月17日,360集团创始人周鸿祎发布全员信。这封题为《用领导力驱...
2026-08-17 17:26:47

热门资讯

估值 5 倍暴涨:Web3 老... 据 Woofun AI 消息,8 月 16 日,美国支付巨头 Stripe 宣布完成对 AI 模型聚...
AI超节点硬件架构演进趋势 通信世界网消息(CWW) 新华三集团云与计算存储产品线 汪新新 随着DeepSeek等大模型的兴起,...
AI重塑微短剧生态 数据显示,2026年第一季度,全行业上线微短剧约12.8万部,其中AI类占比超过95%。2026年第...
原创 美... 兄弟们,隔夜美股走出非常割裂的行情。三大指数集体收跌,道指跌 0.51%,标普 500 跌 0.52...
别让“AI聊天搭子”成了青少年... 孔德淇 当下,“AI(人工智能)聊天搭子”悄然走进青少年的日常生活。中国青少年研究中心调研数据显示,...
调研岂能让AI“代跑” 调研岂能让AI“代跑” 阅读提要 我们党历来强调“没有调查,就没有发言权”。收集社情民意,脚底板不能...
AI产业融资迎来新解法?多家银... AI(人工智能)产业融资迎来新解法?多家银行落地算力贷,信贷评估锚点悄然生变。 近日广东落地的算力T...
营收增长13倍!AI大模型迈入... 近期,海内外AI大模型厂商的商业化迎来积极进展。 海内外AI大模型厂商 迈入“赚钱”阶段 海外方面...
警惕AI扫描度假照片的新型诈骗... 你在波尔图短暂度假,把家人的照片发到了Instagram或Facebook上。照片背景中隐约可见杜罗...