UniLumos: 画像と動画のための統合照明調整

UniLumosは、Alibaba DAMO Academyによる画像と動画の両方で照明を調整するための統合照明調整フレームワークです。幾何学フィードバックを備えています。

U

UniLumos

Wan2.1照明調整画像から動画へDAMO Academy

Alibaba DAMO Academyによる画像と動画の両方に対応した統合照明調整フレームワーク。RGB空間の幾何学的フィードバックをフローマッチングバックボーンに組み込み、物理的に妥当な照明調整を実現します。

HF (オリジナル)HF (Kijai)GitHub
開発元Alibaba DAMO Academy
リリース日2025年11月
アーキテクチャWan2.1ベースのフローマッチングとRGB空間の幾何学的フィードバック
機能画像および動画の照明調整、影とハイライトの補正
速度パス整合性学習により約20倍の高速化

概要

UniLumosは、Alibaba DAMO Academyが開発した統合照明調整フレームワークで、単一のモデルで画像と動画の両方の照明調整タスクを処理します。フローマッチングバックボーンを基盤とし、RGB空間の幾何学的フィードバックを取り入れることで、正しいハイライト、影、オクルージョンを伴う物理的に妥当な照明調整を実現します。

主な特徴として、画像と動画の両方を統一的に処理できる点、幾何学認識による物理的に妥当な照明調整、パス整合性学習による高速処理（従来手法比約20倍の高速化）が挙げられます。このモデルは、キャラクターを新しい背景にシームレスに合成し、自動的に照明を調整します。

ComfyUI 連携

UniLumosは、Kijai WanVideoWrapper カスタムノード経由でComfyUIで利用可能です。モデルの重みはHugging Faceにホストされており、公式のAlibaba DAMO AcademyリポジトリとKijai WanVideo_comfyコレクションの両方にあります。

リソース

リソースリンク
HuggingFace (オリジナル)Alibaba-DAMO-Academy/UniLumos
HuggingFace (Kijai)Kijai/WanVideo_comfy
GitHubgithub.com/alibaba-damo-academy/Lumos-Custom

Guides and workflows related to this model series.

No articles found.