MiniMax H3 RAVEN LoRA: ComfyUIでリアルタイムストリーミング動画を生成
RAVEN(インペリアル・カレッジ・ロンドン)は、4-NFE LoRAアダプターと公式ComfyUIノードにより、MiniMax H3をチャンク単位で出力するリアルタイムストリーミング動画生成ツールに変えます。
RAVEN(Real-time Autoregressive Video Extrapolation with Consistency-model GRPO)は、インペリアル・カレッジ・ロンドンの研究プロジェクトで、MiniMax H3を因果的ストリーミング生成ツールに変えるLoRAアダプターをリリースしました。単一の双方向クリップをデノイズする代わりに、モデルは動画をチャンク単位で生成し、生成済みのコンテンツから各新しいチャンクを外挿します。リリースされたプレビューアダプターは、わずか4サンプリングステップ(NFE)で192フレーム(1376×768 / 24 fps)を生成します。また、プロジェクトには公式ComfyUIノード(ComfyUI-MiniMax-H3-RAVEN-Streaming)とエンドツーエンドのサンプルワークフローが付属しています。
動作の仕組み
RAVENはMiniMax-H3のアーキテクチャを維持し、consistency-model GRPOでトレーニングされたストリーミングヘッドを追加します。各チャンクは、前のコンテキストから少ない固定回数の関数評価で生成されます。これにより、生成はプログレッシブになります。つまり、コンテンツは一度にすべて表示されるのではなく、チャンク単位で段階的に表示されます。これはリアルタイムインタラクションのための重要な構成要素です。4-NFEプレビューアダプターは動画と音声のグリッドを同時に処理するため、テキストから動画と音声(T2VA)へのストリームが同じ因果的パスから出力されます。
リリースされたウェイトは、MiniMax-H3の上に読み込むLoRAアダプター(r=128、lora_alpha=128)です。これは初期のプレビューリリースであり、著者らはテクスチャの詳細がまだ改良中であると述べています。
RAVENは双方向デノイジングを、因果的でチャンク単位のストリーミング外挿に変えます(プロジェクトページより引用)
デモ
RAVENプロジェクトページのストリーミング生成リール(動画提供: yanzuo.lu)
RAVEN論文からの人間の嗜好比較
モデル詳細
| 項目 | 値 |
|---|---|
| ベースモデル | MiniMaxAI/MiniMax-H3 |
| アダプター | LoRA、r=128、lora_alpha=128 |
| サンプリング | 4 NFE(動画および音声グリッド) |
| フレーム数 | 192 |
| 解像度 | 768 × 1376 |
| フレームレート | 24 fps |
| 因果的チャンク分割 | sink=2、window=2 |
| ウェイトファイル | minimax_h3_raven_streaming_lora_4nfe_preview.safetensors(約5 GB) |
ComfyUIでの使用方法
公式ノードは2026年8月20日にリリースされ、Comfy Registryにcomfyui-minimax-h3-raven-streamingとして公開されています。ComfyUI-ManagerでMiniMax H3 RAVEN Streamingを検索するか、comfy node install comfyui-minimax-h3-raven-streamingを実行してインストールし、ComfyUIを再起動してください。
- カスタムノードをインストールします(ComfyUI-Managerまたは
custom_nodes/へのgit clone)。 minimax_h3_raven_streaming_lora_4nfe_preview.safetensorsをComfyUI/models/loras/に、スタンダードなMiniMax H3モデルファイルを通常のフォルダーにダウンロードします。- 同梱のサンプルワークフローを読み込んで実行します(ワークフロー → テンプレートを参照 → 拡張機能、または下のJSONをキャンバスにドラッグ)。
このノードパックは、ComfyUI組み込みのMiniMax H3実装の上に、チャンク優先のストリーミングサンプラー、ストリーミングプレビューウィジェット、必須のRAVEN LoRA配線を実装しています。著者らは、シミュレートされた24 GiB VRAM環境内で1376×768 / 192フレームの生成を検証しました。
これはComfyUIのネイティブサポートではありません。ストリーミングノードは、サードパーティ製の
ComfyUI-MiniMax-H3-RAVEN-Streamingカスタムノードパックに依存しています。
入手方法
- ウェイト: mvp-lab/MiniMax-H3-RAVEN-Streaming-LoRA(MiniMax H3コミュニティライセンス)
- プロジェクトページ: yanzuo.lu/raven
- 論文: arXiv:2605.15190
- コード: mvp-ai-lab/RAVEN
- ComfyUIノード: YanzuoLu/ComfyUI-MiniMax-H3-RAVEN-Streaming・Comfy Registry
コメント
GitHubでサインインしてディスカッションに参加しましょう。