SkyReels-V2: бесконечная генерация видео от Skywork для ComfyUI

ComfyUI Wiki

SkyReels-V2: первая открытая модель генерации видео бесконечной длины на базе Diffusion Forcing. Построена на Wan2.1, поддерживает T2V, I2V и авторегрессионную генерацию видео.

S

SkyReels-V2

ВидеоТекст-в-видеоИзображение-в-видеоDiffusion ForcingБесконечная длинаОткрытый исходный код

SkyReels-V2: модель генерации видео бесконечной длины от Kunlun Tech (Skywork), использующая авторегрессионную архитектуру Diffusion-Forcing для достижения передовых результатов среди открытых видеомоделей. Построена на базе Wan2.1, поддерживает генерацию текста-в-видео (T2V), изображения-в-видео (I2V) и бесконечную генерацию с помощью Diffusion Forcing (DF) в синхронном и асинхронном режимах вывода. Доступна в размерах 14B и 1.3B с разрешением 540P и 720P. Также доступны адаптеры LoRA для тонкой настройки. Поддержка в ComfyUI реализована через WanVideoWrapper от Kijai.

РазработчикKunlun Tech (Skywork AI)
Дата выпуска2025-04-21
АрхитектураАвторегрессионный трансформер Diffusion-Forcing
Базовая модельWan2.1 (Wan-AI)
ЛицензияSkyReels-V2 Community License
Размеры модели14B (полная) / 1.3B (облегчённая)
ВозможностиТекст-в-видео (14B), Изображение-в-видео (14B), Diffusion Forcing (14B/1.3B): авторегрессия бесконечной длины
Выходные разрешения540P (960×544) / 720P (1280×720)
Макс. кадров97~1457 кадров (4с–60с+ при 24fps)
VRAM (540P)~51.2 ГБ (14B) / ~14.7 ГБ (1.3B)

Обзор

SkyReels-V2: первая открытая модель генерации видео, использующая авторегрессионную архитектуру Diffusion-Forcing и достигшая передовых результатов среди общедоступных моделей. Она объединяет мультимодальные большие языковые модели (MLLM), многоэтапное предобучение, обучение с подкреплением и фреймворк Diffusion Forcing, что позволяет генерировать видео бесконечной длины.

Варианты моделей

Доступны три типа моделей, каждый с несколькими разрешениями и вариантами точности:

ТипОписаниеДоступные размерыТочность
Diffusion Forcing (DF)Авторегрессионная генерация видео бесконечной длины; поддерживает задачи T2V и I2V в синхронном или асинхронном режимах14B (540P/720P), 1.3B (540P)fp16, fp8_e4m3fn, fp8_e5m2
Текст-в-видео (T2V)Стандартная генерация видео из текста14B (540P/720P)fp16, fp8_e4m3fn, fp8_e5m2
Изображение-в-видео (I2V)Генерация видео на основе изображения14B (540P/720P)fp16, fp8_e4m3fn, fp8_e5m2
SkyReels A2Управляемая генерация видео для сборки произвольных визуальных элементов; лицензия Apache-2.014B (fp8)fp8_e4m3fn

Ключевые особенности

  • Генерация бесконечной длины: использует Diffusion Forcing с авторегрессионным предсказанием кадров, чтобы создавать видео произвольной длины, выходящие за рамки одного клипа
  • Синхронный и асинхронный вывод: синхронный режим быстрее генерирует, асинхронный лучше следует инструкциям и обеспечивает визуальную согласованность
  • Расширение видео: расширяйте существующие видео с помощью модели DF, передав путь к видео
  • Управление начальным и конечным кадром: управляйте как первым, так и последним кадром генерируемого видео
  • Улучшение промптов: встроенный улучшатель промптов на базе Qwen2.5-32B-Instruct
  • Ускорение TeaCache: опциональное кэширование для более быстрого вывода
  • Поддержка выгрузки: выгрузка на CPU снижает пиковые требования к VRAM

Настройка в ComfyUI

Эти модели упакованы Kijai для использования с пользовательским узлом WanVideoWrapper. Разместите модели диффузии в ComfyUI/models/diffusion_models/, а LoRA в ComfyUI/models/loras/.

Варианты

ВариантОписаниеЛицензияРелиз
SkyReels-V2Модель видео Diffusion Forcing: бесконечные T2V / I2V в версиях 14B и 1.3B при 540P и 720PSkyReels-V2 Community License2025-04

Выберите вариант, чтобы увидеть учебники, пользовательские ноды и связанные новости. Отобранные загрузки весов находятся в каталоге Model Hub.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…