MiniMax H3 Turbo Ref2V v0.1:4ステップ参照から動画LoRA

ComfyUI Wikinews

Lightx2vとModelTCがMiniMax H3 Turbo Ref2V v0.1をリリース。複数の参照画像による動画生成に対応した、ComfyUI対応bf16ウェイトを備えた4ステップ参照から動画LoRAです。

8月13日Lightx2vチームとModelTCは、MiniMax H3 Turbo LoRAシリーズの参照から動画版となるRef2V Turbo v0.1をリリースしました。8月11日のFL2V Turbo v1.0リリースに続き、新しいチェックポイントは同じ4ステップ蒸留をRef2VA(参照から動画+音声)にもたらし、単一の先頭フレームではなく、1枚以上の参照画像によって動画を駆動できるようにします。

Lightx2v Ref2Vテストアセットのキャラクター参照画像

Lightx2v Ref2Vテストアセットのキャラクター参照画像

v0.1の内容

モデルタスクトレーニング解像度トレーニングシフト(動画/音声)蒸留ステップ(NFE)推奨推論ステップ
Ref2VA Turbo 4-step v0.1Ref2VA544p(混合アスペクト比)12 / 344

v0.1リリースは、Hugging Face上の次の2つのファイルで構成されています:

  • minimax_h3_ref2v_turbo_4step_v0.1_bf16.safetensors:Diffusers用
  • minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensors:変換不要でComfyUIにそのまま配置可能

参照画像のリサイズ方針について、プロジェクトは蒸留トレーニングで使用されたmatchモードを推奨しています。このモードは、参照画像のアスペクト比を維持しつつ、小さい参照画像をアップスケーリングせずに、参照画像のピクセル領域をターゲットキャンバスに一致させます。サポートされている3つのポリシーはすべて、参照画像のアスペクト比を維持し、参照コンテンツをクロップせずにH3解像度グリッド(サイズを32の倍数に丸める)を使用します。

ComfyUIでの使用方法

MiniMax H3はComfyUIをネイティブサポートしているため、このLoRAにカスタムノードは必須ではありません:

  1. minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensorsComfyUI/models/loras/にダウンロードします。
  2. Ref2VワークフローでベースのMiniMax H3チェックポイントを読み込み、モデルローダーとサンプラーの間にLoRAを適用します。
  3. 参照入力ブランチに1枚以上の参照画像を接続し、4ステップのサンプリングを実行します。

公式のMiniMax H3 R2Vワークフローテンプレートは良い出発点です。また、プロジェクトは専用のサンプルグラフvideo_minimax_h3_ref2v_lightx2v_turbo.jsonを同梱しており、デフォルトで960x544(16:9、0.5 MP)のRef2VA Turbo 4-step v0.1チェックポイントを使用します。

入手先

コメント

GitHubでサインインしてディスカッションに参加しましょう。

コメントを読み込み中…
MiniMax H3 Turbo Ref2V v0.1:4ステップ参照から動画LoRA | ComfyUI Wiki