当前位置:首页 > 科技资讯 > 正文

2秒生成视频:清华新框架TurboDiffusion震撼提速

现在,只需2秒,视频生成速度超乎你的想象。

得益于一个开源新框架——TurboDiffusion

这一创新成果,由清华大学TSAIL实验室与生数科技携手打造,不仅实现了高质量视频的高效生成,更将速度提升至前所未有的高度。

想象一下,仅用单张显卡就能hold住,这种强大的性能令人赞叹。来感受一下这个非凡的变革:

2秒生成视频:清华新框架TurboDiffusion震撼提速 TurboDiffusion 视频生成 加速 实时生成 第1张

没错,原先在单张RTX 5090上生成一个5秒、1.3B-480P的视频需要184秒。而现在,只需1.9秒!速度提升了惊人的97倍!

这背后,正是TurboDiffusion的神奇力量。作为视频生成加速的新框架,它正在彻底改变我们的创作方式。

2秒生成视频:清华新框架TurboDiffusion震撼提速 TurboDiffusion 视频生成 加速 实时生成 第2张

新框架的推出,让网友们纷纷惊叹:

我们已经进入了一个生成视频比观看视频还多的时代。

2秒生成视频:清华新框架TurboDiffusion震撼提速 TurboDiffusion 视频生成 加速 实时生成 第3张

就连Meta研究员和伯克利教授也为其站台打call:

2秒生成视频:清华新框架TurboDiffusion震撼提速 TurboDiffusion 视频生成 加速 实时生成 第4张

2秒就能生成一个视频

过去,视频生成虽令人惊艳,但速度一直是个老大难的痛点。

生成一段几秒的高质量视频,模型往往需要在高端显卡上运行几分钟到几十分钟。这种延迟,极大限制了创作者的灵感爆发和实时交互的可能性。

TurboDiffusion的出现,正是为了解决这一难题。

咱们直接看一组数据。

在单张RTX 5090上,针对1.3B大小的文生视频模型:

  1. 原始生成:生成一段480P视频需要约184秒(超过3分钟)。
  2. TurboDiffusion:仅需1.9秒。

2秒生成视频:清华新框架TurboDiffusion震撼提速 TurboDiffusion 视频生成 加速 实时生成 第5张

相对于原始模型,TurboDiffusion实现了约97倍的加速!

四个步骤极限压缩时间

那么,这种惊人的速度是如何实现的呢?

TurboDiffusion团队整合了四项关键技术,每一项都精准打击扩散模型推理的性能瓶颈。

  • SageAttention
  • Sparse-Linear Attention(SLA)
  • rCM步数蒸馏
  • W8A8 量化+自定义算子