¿Cómo instalar y usar modelos LoRA en ComfyUI?
Principio de los modelos LoRA
Imagina que tienes un robot chef multifuncional que puede hacer una variedad de platos básicos. Sin embargo, si deseas que este robot chef prepare platos especiales con sabores específicos, como pizza italiana o dumplings chinos, necesitarás proporcionarle algunas “recetas” adicionales.
- Stable Diffusion Stable Diffusion es como este robot chef multifuncional, que puede crear una variedad de platos (imágenes) a partir de diferentes ingredientes (descripciones). Es muy bueno entendiendo tus solicitudes y creando deliciosos platos que se ajustan a tus descripciones.
- Modelo LoRA El modelo LoRA es como las “recetas” adicionales que se le proporcionan a este robot chef. Estas “recetas” pueden ayudar al robot chef a aprender a preparar platos especiales, enriqueciendo sus habilidades culinarias.
Principio
- Habilidad básica: El robot chef (Stable Diffusion) ya sabe cómo hacer una variedad de platos básicos.
- Recetas especiales: LoRA son esas “recetas” especiales que enseñan al chef cómo hacer platos con sabores específicos.
- Proceso de aprendizaje: Al aprender estas “recetas”, el robot chef puede dominar gradualmente la preparación de estos platos especiales.
Función
- Personalización: Con LoRA, el robot chef puede crear platos más personalizados que satisfacen tus necesidades de sabores específicos.
- Flexibilidad: Incluso después de aprender nuevas “recetas”, el robot chef aún puede preparar cualquier otro plato, lo que lo hace más versátil.
- Eficiencia: LoRA permite que el robot chef aprenda nuevas “recetas” sin olvidar sus habilidades culinarias originales, lo que le permite preparar más rápidamente los platos que deseas.
El modelo LoRA en Stable Diffusion es como un conjunto de “recetas” especiales que se le proporcionan al robot chef, permitiéndole ser más flexible y personalizado en la preparación de los platos que deseas, mientras mantiene su capacidad culinaria original.
¿Dónde descargar modelos LoRA?
La mayoría de las comunidades de generación de imágenes AI ofrecen descargas de modelos. Simplemente filtra por LoRA en los sitios web correspondientes para encontrar rápidamente este tipo de modelos.
- civitai: https://civitai.com
- liblib (en China): https://www.liblib.art/
Como se muestra en la imagen a continuación, al filtrar modelos en civitai, selecciona LoRA para filtrar los modelos LoRA.
¿Cómo instalar modelos LoRA en ComfyUI?
Coloca los modelos descargados en el directorio “ComfyUI\models\loras”, luego reinicia o actualiza la interfaz de ComfyUI para cargar el modelo LoRA correspondiente.
Dado que los modelos necesitan diferenciar versiones, para facilitar su uso posterior, te sugiero que renombres los archivos de modelo agregando un prefijo de versión como “SD1.5-nombre del modelo”, o si no deseas renombrar, crea una carpeta en el directorio correspondiente con el nombre de la versión del modelo grande, como “SD1.5”, y copia tus archivos de modelo en “ComfyUI\models\loras\SD1.5”.
Si compartes archivos de modelo con otras GUI, consulta la sección de compartir modelos en instalación de comfyui para copiar los archivos de modelo correspondientes en las carpetas adecuadas.
¿Cómo usar modelos LoRA en ComfyUI?
Consulta los ejemplos de uso de modelos LoRA en el siguiente enlace.
Recomendaciones de modelos LoRA
He actualizado algunas recomendaciones de LoRA en la siguiente página, puedes descargarlas según tus necesidades.