TurboDiffusion - фреймворк ускорения генерации видео с открытым исходным кодом от Raw Digital Technology, Tsinghua и других компаний.

Что такое турбодиффузия?

TurboDiffusion - это фреймворк для ускорения генерации видео, созданный совместными усилиями Университета Цинхуа, BioDigital Technology и Калифорнийского университета в Беркли, который позволяет увеличить скорость генерации видео в 100-200 раз при сохранении качества изображения практически без потерь. Благодаря инновационным средствам, таким как разреженное линейное внимание, дистилляция шагов выборки и 8-битное квантование, фреймворк позволяет генерировать 5-секундное HD-видео за 1,8 секунды на одной видеокарте RTX 5090. Основной прорыв заключается в снижении квадратичной вычислительной сложности традиционной модели распространения видео до линейной, что позволяет решить давнее узкое место в индустрии, на которое обратили внимание Meta, OpenAI и другие организации, и которое считается "моментом DeepSeek" в модели большого видео. Это решение было открыто и применено в мультимодальных больших моделях, таких как Vidu.

Особенности TurboDiffusion

• Ускорение внимания к низкому биту: Используя технологию SageAttention, вычисления внимания выполняются на низкоразрядном ядре Tensor Core для ускорения без потерь и в несколько раз.
• Разрозненное - линейное ускорение внимания: Достигните еще 17-20-кратного ускорения внимания поверх SageAttention, используя обучаемое разреженно-линейное внимание (SLA).
• Шаг отбора проб Ускорение дистилляции: С помощью передового метода дистилляции rCM модели могут быть созданы всего за 3 - 4 шага с высоким качеством видео.
• линейное ускорение слоя: 8-битное квантование с гранулярностью 128x128 блоков (W8A8) параметров и активаций в линейном слое модели, ускоряющее линейные вычисления и значительно сокращающее потребление памяти.

Основные преимущества TurboDiffusion

• Эффективное рассуждениеВыводы TurboDiffusion настолько быстры, что, например, для создания 16-кадрового видео с разрешением 720P на RTX 5090 требуется всего 1,9 секунды.
• Поддержание высокого качества продукции: Качество создаваемого видео остается на высоком уровне, а скорость значительно увеличивается.
• Открытый исходный код и простота использованияКод TurboDiffusion и параметры модели (Checkpoints) имеют открытый исходный код и могут быть установлены и использованы пользователями в несколько простых шагов.

Что такое официальный сайт TurboDiffusion

• Репозиторий GitHub:: https://github.com/thu-ml/TurboDiffusion
• Технический документ arXiv:: https://arxiv.org/pdf/2512.16093

Для кого предназначен TurboDiffusion?

• творческий работникДизайнеры рекламы, создатели видеороликов, аниматоры и т. д. могут быстро генерировать креативные видеоролики, которые помогут им быстро итерировать и оптимизировать свои идеи.
• научный сотрудник: Предоставить ученым и специалистам, работающим над технологиями генерации видео, эффективные экспериментальные инструменты для ускорения процесса исследований.
• школьники: Студентам, изучающим компьютерное зрение и искусственный интеллект, TurboDiffusion поможет быстро понять и применить методы генерации видео.
• Разработчики предприятийTurboDiffusion может значительно повысить эффективность производства контента в бизнес-приложениях, требующих быстрого создания видеоконтента, таких как платформы коротких видеороликов, социальные сети и онлайн-образование.
• Отдельные энтузиасты: Индивидуальные пользователи, интересующиеся технологией создания видео, могут использовать TurboDiffusion для быстрого создания интересных видеороликов для своих личных развлекательных и творческих нужд.