UniLumos: Relighting unificado de imágenes y videos

UniLumos

Wan2.1RelightingImage-to-VideoDAMO Academy

Framework unificado de relighting de Alibaba DAMO Academy para imágenes y videos. Incorpora retroalimentación geométrica en espacio RGB en un backbone de flow-matching para lograr ajustes de iluminación físicamente plausibles.

HF (Original)HF (Kijai)GitHub

Desarrollador	Alibaba DAMO Academy
Fecha de publicación	2025-11
Arquitectura	Backbone de flow-matching basado en Wan2.1 con retroalimentación geométrica en espacio RGB
Capacidades	Relighting de imágenes y videos, ajuste de iluminación, corrección de sombras y reflejos
Velocidad	Aceleración 20x mediante aprendizaje de consistencia de trayectoria

Resumen

UniLumos es un framework unificado de relighting desarrollado por Alibaba DAMO Academy que maneja tareas de relighting tanto en imágenes como en videos dentro de un solo modelo. Construido sobre un backbone de flow-matching, incorpora retroalimentación geométrica en espacio RGB para garantizar ajustes de iluminación físicamente plausibles con reflejos, sombras y oclusiones correctas.

Las características principales incluyen manejo unificado de imágenes y videos, relighting físicamente plausible con conciencia geométrica y procesamiento rápido mediante aprendizaje de consistencia de trayectoria que logra una aceleración de aproximadamente 20x respecto a enfoques anteriores. El modelo integra sin problemas personajes en nuevos fondos con iluminación ajustada automáticamente.

Integración con ComfyUI

UniLumos está disponible en ComfyUI a través de los nodos personalizados Kijai WanVideoWrapper. Los pesos del modelo están alojados en Hugging Face tanto en el repositorio oficial de Alibaba DAMO Academy como en la colección Kijai WanVideo_comfy.

Recursos

Recurso	Enlace
HuggingFace (Original)	Alibaba-DAMO-Academy/UniLumos
HuggingFace (Kijai)	Kijai/WanVideo_comfy
GitHub	github.com/alibaba-damo-academy/Lumos-Custom