Flujo de trabajo de DeepSeek Janus Pro ComfyUI

Janus Pro es un modelo multimodal de código abierto lanzado por DeepSeek el 27 de enero de 2025, que tiene capacidades tanto de comprensión como de generación de imágenes.

Este tutorial se basa en el complemento https://github.com/CY-CHENYUE/ComfyUI-Janus-Pro y detalla cómo configurar y usar DeepSeek Janus Pro en ComfyUI.

Tutorial paso a paso de Janus Pro ComfyUI

1. Instalación del complemento ComfyUI-Janus-Pro

La dirección del complemento es: https://github.com/CY-CHENYUE/ComfyUI-Janus-Pro Métodos de instalación:

• Instalación a través de ComfyUI Manager “Janus-Pro” (recomendado)
• El repositorio de ComfyUI-Janus-Pro también tiene instrucciones detalladas de instalación, especialmente si decides realizar una instalación manual y necesitas instalar dependencias relacionadas.
• Para otros métodos de instalación, consulta el Tutorial de instalación de complementos de ComfyUI.

Asegúrate de que tu red pueda acceder a GitHub sin problemas.

2. Descarga de los modelos relacionados con DeepSeek Janus Pro

En este paso, necesitamos descargar los modelos DeepSeek Janus Pro 1B o 7B.

Descarga e instalación de los modelos DeepSeek Janus Pro

Debes descargar todos los archivos en formato json y los archivos de modelo en formato .bin. Una vez completada la instalación, la estructura de carpetas correspondiente será la siguiente:

📁ComfyUI
├── 📁models
│   ├── 📁 Janus-Pro
│ ...   ├── 📁 Janus-Pro-1B 
│       │   ├── config.json
│       │   ├── preprocessor_config.json
│       │   ├── processor_config.json
│       │   ├── pytorch_model.bin
│       │   ├── special_tokens_map.json
│       │   ├── tokenizer.json
│       │   └── tokenizer_config.json
│       └── 📁 Janus-Pro-7B   
│           ├── config.json
│           ├── preprocessor_config.json
│           ├── processor_config.json
│           ├── pytorch_model-00001-of-00002.bin
│           ├── pytorch_model-00002-of-00002.bin
│           ├── pytorch_model.bin.index.json
│           ├── special_tokens_map.json
│           ├── tokenizer.json
│           ├── tokenizer.json
│           └── tokenizer_config.json

3. Descarga del archivo de flujo de trabajo de Janus Pro

Este flujo de trabajo incluye nodos para la descripción y generación de imágenes.

1. En el número 1, selecciona el modelo 1B o 7B.
2. En el número 2, sube la imagen que deseas que Janus Pro interprete.
3. En el número 3, puedes ajustar el prompt para la descripción de la imagen. He probado con entradas en chino, inglés y japonés sin problemas, pero si necesitas una salida en un idioma específico, asegúrate de indicarlo en el prompt, por ejemplo, por favor, genera la salida en japonés.
4. El número 4 es un nodo que muestra el texto. Aquí estoy utilizando el nodo Show Text del complemento ComfyUI-Custom-Scripts.
5. En el número 5, ingresa el prompt para la generación de la imagen.

Enlaces relacionados con Janus Pro

Descarga de modelos de Janus Pro en Huggingface

Dirección de Github de Janus Pro:

https://github.com/deepseek-ai/Janus

Prueba DeepSeek Janus Pro en Huggingface Space

Chat With Janus 1.3B: https://huggingface.co/spaces/deepseek-ai/Janus-1.3B Chat With Janus Pro 7B: https://huggingface.co/spaces/deepseek-ai/Janus-Pro-7B Chat With Janus: https://huggingface.co/spaces/deepseek-ai/JanusFlow-1.3B

Nodo de DeepSeek Janus-Pro para ComfyUI

Nodo ComfyUI-Janus-Pro: https://github.com/CY-CHENYUE/ComfyUI-Janus-Pro