ComfyUI v0.36.0: Marigold V2ネイティブ対応と動画連結
ComfyUI v0.36.0では、Marigold V2による深度・サーフェス法線・アルベド推定のネイティブ対応と3つの公式ワークフロー、さらに動画連結ノード、FastH3、YuE2、新しいパートナーノードが追加されました。
Marigold V2 は1枚の画像からジオメトリを直接読み取ります。同じチェックポイントファミリーから深度、サーフェス法線、アルベドを取得できます(ティザーはプロジェクトリポジトリより)。
Marigold V2: 深度、サーフェス法線、アルベド
Marigold V2 は HUAWEI Bayer Lab が EPFL およびボローニャ大学と共同で開発したもので、SIGGRAPH Asia 2026 で発表されます(arXiv:2609.08084)。新しい diffusion モデルをゼロからトレーニングするのではなく、Qwen-Image-Edit-2509 をタスクごとの LoRA 重みとファインチューニングされた VAE デコーダでファインチューニングし、単一のサンプリングステップで latent から予測を読み取ります。
コアサポートは Comfy-Org/ComfyUI#16232(CORE-431)でマージされ、公式テンプレートには Comfy-Org が再パッケージした重みが Comfy-Org/marigold-v2-0 として同梱されています。対応するのは次の3つのタスクです:
- 深度: 論文のデフォルトである
depth/Log-stage2チェックポイントによるアフィン不変のログ深度。Hypersim と Virtual KITTI 2(約74k画像)でトレーニングされています。 - サーフェス法線: カメラ空間の単位法線。
- アルベド: [0, 1] のリニア RGB アルベド。
上流のリリースには、ガラスの奥のジオメトリを予測するシースルー(レイヤード)深度チェックポイントや、ユニフォーム深度とディスパリティのアブレーションも含まれています。ComfyUI パッケージには3つの主要モダリティが同梱されています。
プロジェクトリポジトリの手法概要:単一の Qwen-Image-Edit-2509 バックボーンを、高密度予測タスクごとに適応させます。
Marigold V2 ワークフローの内部
各テンプレートはサブグラフとして構築されています。int8 ConvRot の Qwen-Image-Edit-2509 ベース qwen_image_edit_2509_int8_convrot.safetensors を読み込み、タスク LoRA を適用し、事前計算された条件付け embedding とタスク VAE を読み込んでから、0.5 -> 0 シグマで euler を使ってサンプリングします。これは1ステップです。テキストエンコーダは不要です。プロンプト embedding は *_conditioning.safetensors ファイルとして配布され、ConditioningLoader を通じて読み込まれます。
新しい Marigold V2 後処理ノード(MarigoldV2PostProcess、カテゴリ image/geometry estimation)は、デコードされた予測を表示可能な画像に変換します。prediction スイッチで depth(正規化、手前が明るい)、normals(単位法線)、albedo(sRGB)を選択できます。
テンプレートが想定するファイル:
📂 ComfyUI/
└── 📂 models/
├── 📂 diffusion_models/
│ └── qwen_image_edit_2509_int8_convrot.safetensors
├── 📂 loras/
│ ├── marigold_v2_depth_log_stage2.safetensors
│ ├── marigold_v2_normals.safetensors
│ └── marigold_v2_albedo.safetensors
├── 📂 embeddings/
│ ├── marigold_v2_depth_conditioning.safetensors
│ ├── marigold_v2_normals_conditioning.safetensors
│ └── marigold_v2_albedo_conditioning.safetensors
└── 📂 vae/
├── marigold_v2_depth_log_stage2_vae.safetensors
├── marigold_v2_normals_vae.safetensors
└── marigold_v2_albedo_vae.safetensorsモデルとともに公開されたゼロショットの数値:深度の AbsRel / δ1 は NYUv2 で 3.6 / 98.0、KITTI で 5.4 / 97.4、ETH3D で 2.8 / 99.2、ScanNet で 3.7 / 97.9、DIODE で 5.2 / 97.1。サーフェス法線の平均角度誤差は NYUv2 で 16.6°、アルベドの PSNR は Hypersim テストスプリットで 20.78、SSIM は 0.811 です。
動画連結ノード
v0.36.0 では、グラフ内でクリップを端から端まで連結する動画を連結ノード(ConcatenateVideo、カテゴリ video)が追加されました:
- 入力は
video1、video2... として最大100セグメントまで自動拡張され、入力順に追加されます。 - セグメントが互換性のあるコーデックで既にエンコードされている場合、デコードせずに連結されます。
codecのデフォルトはauto(H.264)で、既にエンコードされた動画はそのまま維持されます。- オプションの
complete_audio入力は、セグメントが持つ音声を上書きします。クリップが別々の生成による場合に便利です。
FastVideo FastH3 と YuE2 の対応
このリリースでは、以前の2つのモデルもコアビルドに昇格しました:
- FastVideo FastH3: ネイティブ音声を備えた、テキストから動画へ、および画像から動画への8ステップ蒸留 MiniMax H3。チェックポイントと、テンプレートが依存する VSA アテンション設定については FastH3 8-Step V2 Gets Native ComfyUI Templates を参照してください。
- YuE2: スタイルプロンプトと歌詞からの音楽生成。AMD システム向けのフォローアップ修正、最大楽曲再生時間の延長、生成ノードのコントロール追加が行われています。以前の記事:YuE2。
その他のノードとコアの変更
- 汎用ループ: 同じリリースで、グラフ内のリストを反復処理する
Start LoopとEnd Loopが追加され、Create ListとGet Item From Listも加わりました。 - 画像カラースペースを変換に
linear(リニア Rec.709)の変換先が追加され、既存の sRGB、HDR、HDR PQ スペースに加わりました。 - Gemini テキストノード:
GeminiNodeV3が追加され、V2 ノードは非推奨になりました。 - MiniMax H3: int8 ConvRot VAE の作業に加えて、動画 VAE のメモリ使用量がさらに削減されました。
- Windows 上の AMD: 仮想アドレスクォータが 4TB に引き上げられ(CORE-409)、量子化演算から不要な ROCm triton アーキテクチャのゲートが削除されました。
パートナーノードの更新
- Tripo P2: テキスト、画像、マルチビューから 3Dモデルを生成するノード。
- Pruna P-Video-2: 720p/1080p のテキストから動画へ、および画像から動画へ。ドラフトモード付き。
- BFL: テキスト指示からソースクリップを編集する Flux 動画編集ノード。
- Bria: 新しい画像編集ノードと Video Eraser ノード。
- OpenRouter: Microsoft の
mai-image-2.6モデルと、画像ノードの自動アスペクト比。 - Client: パートナーノードの進捗が、推定所要時間のヘッダーを利用して表示されるようになりました。
修正とその他の変更
- ComfyUI のコンパイラが有効な場合の H3 Fun ControlNet を修正。
- ImageAddNoise ノードがアルファチャンネルにノイズを追加しなくなりました。
- Yue2 の AMD の問題を修正し、生成 ABC ノードにコントロールを追加。
- RoPE がより多くの llama ベースモデルで高速カーネルにより適用されるようになりました。これには Qwen-Image-Edit クラスのモデルが使用するテキストエンコーダが含まれます。
- comfy-kitchen を 0.2.34 に、comfyui-frontend-package を 1.52.7 に、workflow templates を v0.11.62 に更新。
- アセットレコードは
--enable-assetsフラグの背後でコンテンツから分離されました。
v0.36.0 の入手
マネージャーまたはお好みのランチャーで ComfyUI をアップデートしてください。Marigold V2 ワークフローと動画連結ノードには v0.36.0 以降が必要です。Desktop と Cloud ビルドは安定版リリースに追随します。
コメント
GitHubでサインインしてディスカッションに参加しましょう。