SkyReels-V2: Skywork의 무한 길이 영화 생성 모델
SkyReels-V2는 Diffusion Forcing을 사용하는 최초의 오픈소스 무한 길이 영화 생성 모델입니다. Wan2.1 기반으로 T2V, I2V 및 자동회귀 비디오 생성을 지원합니다.
SkyReels-V2
VideoText-to-VideoImage-to-VideoDiffusion ForcingInfinite-LengthOpen SourceSkyReels-V2는 Kunlun Tech(Skywork)의 무한 길이 영화 생성 모델로, AutoRegressive Diffusion-Forcing 아키텍처를 사용하여 최첨단 오픈소스 비디오 생성을 구현합니다. Wan2.1 기반으로 구축되어 텍스트 기반 비디오 생성(T2V), 이미지 기반 비디오 생성(I2V) 및 동기 및 비동기 추론 모드를 통한 무한 길이 Diffusion Forcing(DF) 생성을 지원합니다. 540P 및 720P 해상도의 14B 및 1.3B 파라미터 크기로 제공됩니다. LoRA 어댑터도 미세 조정에 사용할 수 있습니다. Kijai의 WanVideoWrapper를 통한 ComfyUI 지원.
| 개발자 | Kunlun Tech (Skywork AI) |
| 출시일 | 2025-04-21 |
| 아키텍처 | AutoRegressive Diffusion-Forcing Transformer |
| 베이스 모델 | Wan2.1 (Wan-AI) |
| 라이선스 | SkyReels-V2 커뮤니티 라이선스 |
| 모델 크기 | 14B (전체) / 1.3B (경량) |
| 기능 | 텍스트 기반 비디오 생성 (14B), 이미지 기반 비디오 생성 (14B), Diffusion Forcing (14B/1.3B) : 무한 길이 자동회귀 |
| 출력 해상도 | 540P (960×544) / 720P (1280×720) |
| 최대 프레임 | 97~1457 프레임 (24fps에서 4초~60초+) |
| VRAM (540P) | ~51.2 GB (14B) / ~14.7 GB (1.3B) |
개요
SkyReels-V2는 AutoRegressive Diffusion-Forcing 아키텍처를 사용하는 최초의 오픈소스 비디오 생성 모델로, 공개 모델 중 최첨단 성능을 달성합니다. 멀티모달 대규모 언어 모델(MLLM), 다단계 사전 학습, 강화 학습 및 Diffusion Forcing 프레임워크를 결합하여 무한 길이 영화 생성을 가능하게 합니다.
모델 변형
세 가지 모델 유형이 제공되며, 각각 여러 해상도 및 정밀도 옵션이 있습니다.
| 유형 | 설명 | 사용 가능한 크기 | 정밀도 |
|---|---|---|---|
| Diffusion Forcing (DF) | 무한 길이 자동회귀 비디오 생성; 동기 또는 비동기 모드에서 T2V 및 I2V 작업 지원 | 14B (540P/720P), 1.3B (540P) | fp16, fp8_e4m3fn, fp8_e5m2 |
| 텍스트 기반 비디오 생성 (T2V) | 표준 텍스트 기반 비디오 생성 | 14B (540P/720P) | fp16, fp8_e4m3fn, fp8_e5m2 |
| 이미지 기반 비디오 생성 (I2V) | 이미지 조건 비디오 생성 | 14B (540P/720P) | fp16, fp8_e4m3fn, fp8_e5m2 |
| SkyReels A2 | 임의의 시각적 요소를 조합하기 위한 제어 가능한 비디오 생성; Apache-2.0 | 14B (fp8) | fp8_e4m3fn |
주요 기능
- 무한 길이 생성: 단일 클립 제한을 넘어 임의로 긴 비디오를 생성하기 위해 자동회귀 프레임 예측과 함께 Diffusion Forcing 사용
- 동기 및 비동기 추론: 동기식은 더 빠른 생성, 비동기식은 더 나은 명령 따르기 및 시각적 일관성
- 비디오 확장: 비디오 경로를 전달하여 DF 모델로 기존 비디오 확장
- 시작/끝 프레임 제어: 생성된 비디오의 첫 번째 및 마지막 프레임 제어
- 프롬프트 강화: Qwen2.5-32B-Instruct를 사용한 내장 프롬프트 강화기
- TeaCache 가속화: 더 빠른 추론을 위한 선택적 캐싱
- 오프로드 지원: CPU 오프로딩으로 최대 VRAM 요구 사항 감소
ComfyUI 설정
이 모델들은 Kijai가 WanVideoWrapper 커스텀 노드와 함께 사용하기 위해 패키징했습니다. 확산 모델은 ComfyUI/models/diffusion_models/에, LoRA는 ComfyUI/models/loras/에 배치하세요.