MiniMax H3 Singularity V2: アクション範囲の拡大と音声参照の修正

Singularityは、以前MiniMax H3 Singularityで紹介したコミュニティ製H3融合ファインチューンです。H3のref、fl、b25-49チェックポイントをマージし、深くファインチューンした後、高ステップのトレーニング痕跡を削除するために3日間かけてプルーニングしたものです。V2はそのレシピや、対応する4つのパイプライン（テキストから動画へ、画像から動画へ、参照から動画、動画から動画へ）を変更していません。同じモデルを、異なる修正セットを加えて再トレーニングしたものです。

リリースリポジトリのショーケースクリップからの1フレーム。

V2の変更点

モデルカードにはV1からの変更点が4つ挙げられており、3つは品質の修正、1つは機能的なバグ修正です。

音声参照の修正は、モデルの性能の良し悪しではなく、モデルができることを変える唯一の変更です。V1では音声参照パスが正しく条件付けされていなかったため、参照と一緒に音声を渡してもほとんど効果がないか、狙いから外れた色が生成されていました。V2ではこのパスが色調調整に機能するとされています。それ以外はすべて維持されています。モーションブラーに対するHDR指向のトレーニング、ミディアムショットやロングショットでの遠景の顔の復元、肌の光沢の低減、近接戦や剣戟のモーションの強化、ファンタジーVFX、カメラムーブへの応答、表情のディテールです。

V2のプロンプティング

V2のガイダンスでは、被写体、アクション、環境、カメラの動き、意図するスタイルを一貫した1つの指示で記述し、繰り返しや競合するスタイルワードは避けるよう求めています。カードにはルックごとのキーワードセットも記載されています。

5,000文字という数字は目標ではなく上限として説明されているため、アクションショットでは短く構造化されたプロンプトが既定の想定です。

リポジトリのショーケースクリップ。1440×832、音声付き。

リポジトリの別のショーケースクリップ。カバー画像はこのクリップからの1フレームです。

ファイル名が音声参照パスを示すショーケースクリップ。V2が修正したパスです。

ファイルとセットアップ

V2は、標準のH3 INT8ウェイトと同じスロットに、単一のINT8チェックポイントとして提供されます。

V2のアップロードはフルサイズのINT8レイアウトのみです。V2にはプルーニング済みINT8ビルドも4ビットビルドもまだ存在しないため、11 GBのw4a8ファイルを動かしていたカードでは、引き続きV1.3チェックポイントにフォールバックする必要があります。カードは4ステップ推論用の高速化LoRAとしてminimax_h3_ref2v_turbo_4step_v0.1を引き続き推奨しています。

リポジトリにはMiniMax_H3_Singularity_Prompt_Writing_Specification_Enhanced_EN.mdも含まれています。これは9月に最終更新されたプロンプト作成仕様で、このファインチューンが読み取るようトレーニングされたプロンプト構造を説明しています。

入手方法

Hugging FaceリポジトリからV2チェックポイントをダウンロードし、ComfyUI/models/diffusion_models/に配置して、MiniMax H3 diffusionモデルを読み込む場所でロードしてください。モデルカードには、ローカルGPUなしでブラウザから試せるRunningHubワークフローへのリンクがあり、r/comfyuiのコミュニティ投稿ではV2を中心に構築されたデュアルサンプリングワークフローがリンクされています。