SkyReels-V2: генерация видео бесконечной длины от Skywork

ComfyUI Wiki

SkyReels-V2: открытая видеомодель Skywork на основе Diffusion Forcing для генерации бесконечной длины, с чекпойнтами 14B и 1.3B в разрешениях 540P и 720P.

S

SkyReels-V2

ВидеоТекст-в-видеоИзображение-в-видеоDiffusion ForcingБесконечная длина

Открытая видеомодель от Skywork AI, построенная на авторегрессивной архитектуре Diffusion-Forcing. Она генерирует произвольно длинные ролики, выходя за пределы одного клипа, вместо того чтобы рассматривать каждый кадр изолированно, и выпускается в виде чекпойнтов 14B и 1.3B в разрешениях 540P и 720P в сборках Text-to-Video, Image-to-Video и Diffusion Forcing, а также с LoRA-адаптерами для дообучения.

РазработчикKunlun Tech (Skywork AI)
Дата выпуска2025-04
АрхитектураAutoRegressive Diffusion-Forcing Transformer
Базовая модельWan2.1 (Wan-AI)
ЛицензияSkyReels-V2 Community License
Размеры моделей14B (540P / 720P), 1.3B (540P)
ВозможностиТекст-в-видео, изображение-в-видео, Diffusion Forcing бесконечной длины, расширение видео, управление начальным и конечным кадром
Точностьfp16, fp8_e4m3fn, fp8_e5m2

Что такое SkyReels-V2?

SkyReels-V2 представляет собой первую открытую генеративную видеомодель, построенную на авторегрессивной архитектуре Diffusion-Forcing, которая объединяет мультимодальную LLM, многоэтапное предобучение, обучение с подкреплением и фреймворк Diffusion Forcing. Diffusion Forcing предсказывает кадры авторегрессивно, а не генерирует один клип фиксированной длины, и именно это обеспечивает генерацию фильмов бесконечной длины: видео может продолжаться за пределами одного окна, а существующее видео можно расширить, подав его обратно на вход.

В разрешениях 540P и 720P выпускаются три типа сборок: стандартные Text-to-Video, Image-to-Video и модели Diffusion Forcing, которые поддерживают обе задачи при синхронном (быстрее) или асинхронном (лучшее следование инструкциям и согласованность) выводе. Чекпойнт DF на 1.3B ориентирован на потребительские GPU, а LoRA-адаптеры покрывают дообучение T2V и I2V в 720P.

Guides and workflows related to this model series.

No articles found.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…