Anima Control Pose Preview-2: Control de Pose Nativo para ComfyUI

news

Anima Control Pose Preview-2 trae generación de imágenes controladas por pose a Anima con nodos personalizados nativos de ComfyUI, soporte multiresolución a 512/768/1024 y precisión de pose mejorada

Se ha lanzado un nuevo adaptador de control de pose para el modelo de imagen Anima v1.0 — Anima Control Pose Preview-2 trae condicionamiento de pose basado en esqueleto a Anima con nodos personalizados nativos de ComfyUI, soporte multiresolución y una precisión sustancialmente mejorada en el seguimiento de poses.

Qué Hace

Anima Control Pose es un control-LoRA de concatenación de canales que condiciona la generación de imágenes de Anima a un mapa de pose de esqueleto. Dada una foto de referencia, el nodo de ComfyUI detecta la pose y renderiza un esqueleto, que el modelo sigue durante la generación — permitiendo un control preciso sobre la posición de personajes, gestos y lenguaje corporal en imágenes generadas por IA.

Preview-2 es una actualización importante sobre Preview-1 que incluye:

  • Soporte multiresolución: 512, 768 y 1024 px (Preview-1 solo 512)
  • Corpus de entrenamiento más grande — anatomía más limpia y poses más estables
  • Nuevo nodo de ComfyUI "Anima Pose Control" — detecta automáticamente la pose de una foto de referencia con múltiples estilos de renderizado de esqueleto (fino, grueso, títere, mapa de calor, con/sin manos y rostro)
  • Body-PCK@0.1: ~0.83 a resolución 1024 (vs ~0.59 para Preview-1 a 512)

Método

El adaptador de control utiliza un ControlEmbedder inicializado en cero que produce tokens de control añadidos a la salida congelada del patch-embed base, más un adaptador de bajo rango (rank-16) en los bloques del transformer. El modelo base Anima, el codificador de texto y el VAE permanecen congelados.

Con strength = 0, el adaptador es exactamente el modelo base — la contribución del control crece solo a medida que gana pérdida durante el entrenamiento.

ParámetroValor
Resolución512 + 768 + 1024, con buckets de relación de aspecto
Rango del adaptador16
Dropout de control0.1
Precisiónbf16

Uso en ComfyUI

El lanzamiento incluye todo lo necesario para una experiencia fluida en ComfyUI:

  1. Instalación: Coloca anima_pose_preview2.safetensors en ComfyUI/models/loras/, luego copia las dos carpetas de nodos personalizados (anima_control_lora/ y ComfyUI-anima-pose-control/) en ComfyUI/custom_nodes/
  2. Flujos de trabajo: Cuatro flujos de trabajo .json incluidos — demo (control vs sin control lado a lado), simple, edición y comparación (una pose en todos los estilos de esqueleto)
  3. Detección de pose: El nodo Anima Pose Control descarga automáticamente los modelos ONNX de DWPose (~316 MB) en el primer uso; funciona sin conexión después del caché

Disponibilidad

Anima Control Pose Preview-2 está disponible en Hugging Face bajo una licencia no comercial:

  • Repositorio HF: czxkck/Anima-Control-Pose
  • Archivo principal: anima_pose_preview2.safetensors (colocar en ComfyUI/models/loras/)
  • Nodos personalizados: Incluidos en el repositorio bajo comfyui/
  • Modelo base: Anima v1.0 de Circlestone Labs (requerido)

El autor señala que Preview-2 sigue siendo experimental — aunque mejorado significativamente, aún puede fallar en poses complejas o producir artefactos. Se está desarrollando una Preview-3 con enfoque en una mejor representación del esqueleto y un detector de pose específico para anime.

Comentarios

Inicia sesión con GitHub para unirte a la conversación.

Cargando comentarios…
Anima Control Pose Preview-2: Control de Pose Nativo para ComfyUI | ComfyUI Wiki