MiniMax H3 RAVEN LoRA: ComfyUI 실시간 스트리밍 비디오 생성
RAVEN(Imperial College London)이 MiniMax H3를 4-NFE LoRA 어댑터와 공식 ComfyUI 노드를 통해 실시간 스트리밍 비디오 생성기로 전환합니다. 청크 단위 출력을 지원합니다.
RAVEN(Real-time Autoregressive Video Extrapolation with Consistency-model GRPO)은 Imperial College London의 연구 프로젝트로, MiniMax H3를 causal 스트리밍 생성기로 바꿔주는 LoRA 어댑터를 공개합니다. 하나의 양방향 클립을 denoising하는 대신, 모델은 비디오를 청크 단위로 생성하며 이전에 생성된 콘텐츠에서 각각의 새 청크를 외삽합니다. 공개된 미리보기 어댑터는 단 **4회의 샘플링 스텝(NFE)**만으로 1376×768 / 24fps에서 192프레임을 생성하며, 프로젝트는 공식 ComfyUI 노드(ComfyUI-MiniMax-H3-RAVEN-Streaming)와 엔드투엔드 예제 워크플로를 함께 제공합니다.
작동 원리
RAVEN은 MiniMax-H3의 아키텍처를 유지하면서 consistency-model GRPO로 학습된 스트리밍 헤드를 추가합니다. 각 청크는 적은 고정 횟수의 함수 평가로 이전 컨텍스트에서 생성됩니다. 이로 인해 생성이 점진적이 됩니다. 즉, 콘텐츠가 한 번에 모두 나타나는 것이 아니라 청크 단위로 나타나며, 이는 실시간 상호작용의 핵심 구성 요소입니다. 4-NFE 미리보기 어댑터는 비디오 및 오디오 그리드를 함께 대상으로 하므로, 텍스트 기반 비디오 및 오디오 생성(T2VA) 스트림이 동일한 causal 패스에서 출력됩니다.
공개된 가중치는 MiniMax-H3 위에 로드되는 LoRA 어댑터(r=128, lora_alpha=128)입니다. 초기 미리보기 릴리스이며, 작성자들은 텍스처 디테일이 아직 개선 중이라고 밝혔습니다.
RAVEN은 양방향 denoising을 causal한 청크 단위 스트리밍 외삽으로 변환합니다(프로젝트 페이지의 그림).
데모
RAVEN 프로젝트 페이지의 스트리밍 생성 릴(비디오 출처: yanzuo.lu)
RAVEN 논문의 인간 선호도 비교
모델 세부 정보
| 항목 | 값 |
|---|---|
| 베이스 모델 | MiniMaxAI/MiniMax-H3 |
| 어댑터 | LoRA, r=128, lora_alpha=128 |
| 샘플링 | 4 NFE (비디오 및 오디오 그리드) |
| 프레임 | 192 |
| 해상도 | 768 × 1376 |
| 프레임 속도 | 24 fps |
| Causal 청크화 | sink=2, window=2 |
| 가중치 파일 | minimax_h3_raven_streaming_lora_4nfe_preview.safetensors (~5 GB) |
ComfyUI 사용법
공식 노드는 2026년 8월 20일에 출시되었으며 Comfy Registry에 comfyui-minimax-h3-raven-streaming으로 게시되어 있습니다. ComfyUI-Manager에서 MiniMax H3 RAVEN Streaming을 검색하거나 comfy node install comfyui-minimax-h3-raven-streaming 명령으로 설치한 다음 ComfyUI를 재시작하세요.
- 커스텀 노드를 설치합니다(ComfyUI-Manager 또는
custom_nodes/에 git clone). minimax_h3_raven_streaming_lora_4nfe_preview.safetensors를ComfyUI/models/loras/에 다운로드하고, 표준 MiniMax H3 모델 파일은 각자의 폴더에 넣습니다.- 함께 제공되는 예제 워크플로를 로드하고(Workflow → 템플릿 탐색 → 확장 프로그램, 또는 아래 JSON을 캔버스로 드래그) 실행합니다.
이 노드 팩은 ComfyUI에 내장된 MiniMax H3 구현 위에 청크 우선(chunk-major) 스트리밍 샘플러, 스트리밍 미리보기 위젯, 필수 RAVEN LoRA 연결을 구현합니다. 작성자들은 시뮬레이션된 24 GiB VRAM 환경 내에서 1376×768 / 192프레임 생성을 검증했습니다.
이는 ComfyUI 기본 지원이 아닙니다. 스트리밍 노드는 서드파티
ComfyUI-MiniMax-H3-RAVEN-Streaming커스텀 노드 팩에 의존합니다.
제공 정보
- 가중치: mvp-lab/MiniMax-H3-RAVEN-Streaming-LoRA (MiniMax H3 커뮤니티 라이선스)
- 프로젝트 페이지: yanzuo.lu/raven
- 논문: arXiv:2605.15190
- 코드: mvp-ai-lab/RAVEN
- ComfyUI 노드: YanzuoLu/ComfyUI-MiniMax-H3-RAVEN-Streaming · Comfy Registry
댓글
GitHub로 로그인하고 토론에 참여하세요.