Guía Detallada del Flujo de Trabajo de Flux ControlNet

Este tutorial te guiará sobre cómo usar los modelos oficiales ControlNet de Flux en ComfyUI. Cubriremos el uso de dos modelos de control oficiales: FLUX.1 Depth y FLUX.1 Canny.

Este tutorial está basado y actualizado desde los ejemplos de ComfyUI Flux

Introducción a los Modelos

FLUX.1 Depth [dev]

• Modelo transformador de flujo rectificado de 12 mil millones de parámetros
• Guía estructural basada en mapas de profundidad
• Utiliza entrenamiento de destilación guiada para mejorar la eficiencia
• Admite uso personal, investigación y comercial

FLUX.1 Canny [dev]

• Modelo transformador de flujo rectificado de 12 mil millones de parámetros
• Guía estructural basada en detección de bordes Canny
• También utiliza método de entrenamiento de destilación guiada
• Sigue la licencia no comercial de FLUX.1 [dev]

Descripción de Versiones del Modelo

Los modelos Flux ControlNet están disponibles en dos versiones: Modelo Completo y Modelo LoRA.

Versión de Modelo Completo

• Archivo de modelo completo que contiene todos los pesos
• Requiere mayor VRAM
• Mejor calidad de generación

Versión LoRA

• Modelo ligero que contiene solo pesos diferenciales
• Requiere modelo base Flux
• Menor uso de VRAM

Preparación

1. Actualizar ComfyUI

Primero, asegúrate de que tu ComfyUI esté actualizado a la última versión. Si no sabes cómo actualizar y mejorar ComfyUI, consulta Cómo Actualizar y Mejorar ComfyUI.

Nota: La funcionalidad Flux ControlNet requiere la última versión de ComfyUI, así que por favor completa la actualización primero.

2. Descargas del Modelo Completo

3. Descargas del Modelo LoRA

4. Descargas de Archivos de Flujo de Trabajo

5. Requisitos del Sistema

• Requisitos de VRAM: Se recomienda al menos 16GB VRAM
• Si la VRAM es limitada, puede usar la versión fp8 del modelo para reducir el uso de memoria

Recursos de Referencia

• Página Oficial de FLUX.1 Depth Dev
• Página Oficial de FLUX.1 Canny Dev
• Ejemplos de ComfyUI Flux
• Blog de blackforestlabs