当前位置: 首页 » 资讯 » 新科技 » 正文

快手联合北大等开源新AI模型 可生成10秒24帧768P视频

IP属地 中国·北京 编辑:胡颖 太平洋科技 时间:2024-10-12 18:37:16

近日,快手科技携手北京大学和北京邮电大学的研究团队,共同推出了一款名为Pyramid Flow的开源文生视频AI模型。该模型旨在为开发者、艺术家和创作者提供一种更高效、更灵活的视频生成解决方案。

在视频生成速度方面,Pyramid Flow展现出卓越的性能。该模型能够在56秒内快速生成一段5秒、384p的视频,其速度在同类模型中颇具竞争力,甚至超越了部分全序列扩散模型。

此外,Pyramid Flow能够基于文本描述,生成最长10秒、1280x768分辨率、24fps的高质量视频。在视频质量、光影效果、运动动作一致性、文本语义还原和色彩搭配等方面,该模型均表现出色。

Pyramid Flow模型引入了一种新颖的“金字塔流匹配”技术,通过分阶段生成视频来降低计算成本。与传统模型相比,它在大多数阶段使用低分辨率,仅在最终阶段达到全分辨率,有效减少了所需的tokens数量,仅为传统扩散模型的四分之一。

目前,Pyramid Flow已正式在Hugging Face平台上线,并完全开源。这一创新技术的推出,不仅为视频生成领域带来了新的突破,也为处理和生成高维度视频数据提供了有效的解决方案。

免责声明:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其内容真实性、完整性不作任何保证或承诺。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。