LoRAs de control de MOSS-Image en ComfyUI: Canny, profundidad y pose

ComfyUI Wikinews

Siete LoRAs de edición estilo ControlNet para MOSS-Image-SFT, una por mapa de control, con flujo de ComfyUI, ejemplos y un solo archivo de 290 MB.

thedeoxen publicó el 10 de noviembre siete LoRAs de control para MOSS-Image-SFT: canny, profundidad, pose, normal, arte lineal, scribble y segmentación. Cada una es un único LoRA de rango 64 de ~290 MB con su propio flujo de trabajo de ComfyUI y su cuadrícula de ejemplo de control a resultado, así que puedes elegir el mapa que ya tengas y ejecutarlo.

Son LoRAs de edición, no un modelo de control nuevo. El mapa entra como imagen de referencia y el prompt decide en qué se convierten las formas.

Ejemplo de control de profundidad

Control de profundidad (el más a la izquierda) con resultados generados a partir de distintos prompts

Qué recibe cada LoRA

LoRAMapa de control a introducirPreprocesador del flujo de trabajo incluidoCheckpoint
Cannyaristas blancas finas sobre negroCannypaso 4500
Profundidadprofundidad en escala de grises, lo cercano es blancoDepth Anything V2 (ViT-L)paso 5000
Poseesqueleto DWPose, fondo negroDWPosepaso 4500
Normalmapa de normales en espacio de cámaramapa de normales BAEpaso 5000
Arte lineallíneas blancas finas, arte lineal de trazo gruesoLineArtpaso 5000
Scribbletrazos blancos sueltosHEDpaso 5000
Segmentaciónregiones de color planosegmentación semántica UniFormerpaso 4500
Control de poseControl de Canny
Esqueleto DWPose convertido en una figura que saltaAristas de Canny convertidas en un nuevo material y entorno

Cómo ejecutarlo

  1. Carga MOSS-Image-SFT: UNet moss_image_sft_int8_convrot.safetensors, CLIP qwen3.5_9b_w4a8_gptq.safetensors con tipo moss_image, VAE flux2-vae_small.safetensors.
  2. Añade el LoRA en el UNet con fuerza 1.0. Bájala hacia 0.7 si el control resulta demasiado rígido.
  3. Introduce el mapa de control como única imagen de referencia en Codificar texto para edición de MOSS-Image, y establece edit_format en ai-toolkit tanto en la codificación positiva como en la negativa. Estos LoRAs se entrenaron con la caché kv activada.
  4. Muestrea con 30 pasos, CFG 4, euler y simple.

Los preprocesadores de los flujos de trabajo (Canny, Depth Anything V2, DWPose, BAE, LineArt, HED, UniFormer) provienen del paquete ControlNet Auxiliary Preprocessors, no del núcleo de ComfyUI. Si ya tienes un mapa, salta el preprocesador y conecta la imagen directamente al nodo de codificación.

Control de segmentación

Regiones de color plano de UniFormer, con el estilo reajustado según el prompt

En qué se diferencia del adaptador oficial

El adaptador de control de color/profundidad de MOSS-Image oficial parte del ruido y toma un mapa de regiones junto con un mapa de profundidad como acondicionamiento. Estos LoRAs, en cambio, tratan el mapa como imagen de referencia, y por eso funcionan con cualquiera de los siete tipos de mapa y por eso el prompt aporta toda la apariencia. La contrapartida es que los controles fuertes pueden sujetar demasiado: las fichas recomiendan una fuerza de 0.7 cuando la composición parece congelada.

Descargas

Modelo base: OpenMOSS-Team/MOSS-Image-SFT. Cada repositorio incluye su propio moss_image_<type>_control.json, que puedes arrastrar a ComfyUI una vez que los tres archivos base estén en su sitio.

Comentarios

Inicia sesión con GitHub para unirte a la conversación.

Cargando comentarios…
LoRAs de control de MOSS-Image en ComfyUI: Canny, profundidad y pose | ComfyUI Wiki