MiniMax H3 RAVEN LoRA: ComfyUIでリアルタイムストリーミング動画を生成

ComfyUI Wikinews

RAVEN(インペリアル・カレッジ・ロンドン)は、4-NFE LoRAアダプターと公式ComfyUIノードにより、MiniMax H3をチャンク単位で出力するリアルタイムストリーミング動画生成ツールに変えます。

RAVEN(Real-time Autoregressive Video Extrapolation with Consistency-model GRPO)は、インペリアル・カレッジ・ロンドンの研究プロジェクトで、MiniMax H3を因果的ストリーミング生成ツールに変えるLoRAアダプターをリリースしました。単一の双方向クリップをデノイズする代わりに、モデルは動画をチャンク単位で生成し、生成済みのコンテンツから各新しいチャンクを外挿します。リリースされたプレビューアダプターは、わずか4サンプリングステップ(NFE)192フレーム(1376×768 / 24 fps)を生成します。また、プロジェクトには公式ComfyUIノードComfyUI-MiniMax-H3-RAVEN-Streaming)とエンドツーエンドのサンプルワークフローが付属しています。

動作の仕組み

RAVENはMiniMax-H3のアーキテクチャを維持し、consistency-model GRPOでトレーニングされたストリーミングヘッドを追加します。各チャンクは、前のコンテキストから少ない固定回数の関数評価で生成されます。これにより、生成はプログレッシブになります。つまり、コンテンツは一度にすべて表示されるのではなく、チャンク単位で段階的に表示されます。これはリアルタイムインタラクションのための重要な構成要素です。4-NFEプレビューアダプターは動画と音声のグリッドを同時に処理するため、テキストから動画と音声(T2VA)へのストリームが同じ因果的パスから出力されます。

リリースされたウェイトは、MiniMax-H3の上に読み込むLoRAアダプターr=128lora_alpha=128)です。これは初期のプレビューリリースであり、著者らはテクスチャの詳細がまだ改良中であると述べています。

RAVEN architecture

RAVENは双方向デノイジングを、因果的でチャンク単位のストリーミング外挿に変えます(プロジェクトページより引用)

デモ

RAVENプロジェクトページのストリーミング生成リール(動画提供: yanzuo.lu)

Preference comparison

RAVEN論文からの人間の嗜好比較

モデル詳細

項目
ベースモデルMiniMaxAI/MiniMax-H3
アダプターLoRA、r=128、lora_alpha=128
サンプリング4 NFE(動画および音声グリッド)
フレーム数192
解像度768 × 1376
フレームレート24 fps
因果的チャンク分割sink=2、window=2
ウェイトファイルminimax_h3_raven_streaming_lora_4nfe_preview.safetensors(約5 GB)

ComfyUIでの使用方法

公式ノードは2026年8月20日にリリースされ、Comfy Registrycomfyui-minimax-h3-raven-streamingとして公開されています。ComfyUI-ManagerでMiniMax H3 RAVEN Streamingを検索するか、comfy node install comfyui-minimax-h3-raven-streamingを実行してインストールし、ComfyUIを再起動してください。

  1. カスタムノードをインストールします(ComfyUI-Managerまたはcustom_nodes/へのgit clone)。
  2. minimax_h3_raven_streaming_lora_4nfe_preview.safetensorsComfyUI/models/loras/に、スタンダードなMiniMax H3モデルファイルを通常のフォルダーにダウンロードします。
  3. 同梱のサンプルワークフローを読み込んで実行します(ワークフロー → テンプレートを参照 → 拡張機能、または下のJSONをキャンバスにドラッグ)。

このノードパックは、ComfyUI組み込みのMiniMax H3実装の上に、チャンク優先のストリーミングサンプラー、ストリーミングプレビューウィジェット、必須のRAVEN LoRA配線を実装しています。著者らは、シミュレートされた24 GiB VRAM環境内で1376×768 / 192フレームの生成を検証しました。

これはComfyUIのネイティブサポートではありません。ストリーミングノードは、サードパーティ製のComfyUI-MiniMax-H3-RAVEN-Streamingカスタムノードパックに依存しています。

入手方法

コメント

GitHubでサインインしてディスカッションに参加しましょう。

コメントを読み込み中…
MiniMax H3 RAVEN LoRA: ComfyUIでリアルタイムストリーミング動画を生成 | ComfyUI Wiki