FIFO官网链接地址:https://github.com/jjihwan/FIFO-Diffusion_public
网站默认显示语言:英语
FIFO 介绍
FIFO-Diffusion是一种基于预训练扩散模型的新颖推理技术,用于文本条件视频生成。它能够无需训练生成无限长的视频,通过迭代执行对角去噪,同时处理队列中一系列连续帧的逐渐增加的噪声水平;该方法在头部出队一个完全去噪的帧,同时在尾部入队一个新的随机噪声帧。此外,引入了潜在分割来减少训练推理差距,并通过前瞻去噪来利用前向引用的好处。
FIFO用户群体
FIFO-Diffusion适用于需要生成高质量视频内容的专业人士和企业,如视频制作者、动画师、广告公司等。它特别适合于那些希望快速生成视频内容,但又不想投入大量时间和资源进行视频训练的个人和团队。
生成悉尼港上空的烟花表演视频
制作南极冰原上企鹅群的4K超高清视频
创建宇航员在太空中漂浮的高质量4K视频
FIFO的核心功能
- 迭代执行对角去噪,处理连续帧的噪声
- 潜在分割减少训练推理差距
- 前瞻去噪利用前向引用的优势
- 无需训练即可生成视频,降低使用门槛
- 生成的视频具有高分辨率和高画质
- 支持多种视频生成基线,如VideoCrafter2、Open-Sora-Plan等
- 与现有技术相比,展现出更好的时间一致性和视觉质量