AI Movie Studio 2: Estación de cine open source para ComfyUI
AI Movie Studio 2 es una estación de cine con IA open source que impulsa ComfyUI local: storyboard 3D, continuidad, modo Toma Continua y exportación de timeline.
El proyecto proviene de Nathan McConnell, especialista en producción virtual y veterano del departamento de cámara con base en Atlanta que gestiona escenarios de volumen LED en SCAD. La primera versión colapsó bajo su propia lista de características, por lo que la versión 2 fue reconstruida desde cero alrededor de un objetivo: una interfaz limpia que sigue el flujo de trabajo real de cine en lugar de un panel de control con todo incluido.
Cómo funciona con ComfyUI
AI Movie Studio 2 no genera nada por sí mismo. Es una cabina de director sobre tu configuración existente: un frontend Next.js 14 habla con un backend FastAPI, y el sistema de controlador del backend se adapta al motor al que apuntes. Localmente significa tu instancia de ComfyUI en ejecución en 127.0.0.1:8188; en la nube significa Fal.ai o Replicate con una clave API. La interfaz nunca cambia.
Los modelos de vídeo locales compatibles en ComfyUI son LTX Video 2.3, Wan Video (vía WanVideoWrapper de Kijai) y MiniMax H3 (vía nodos MiniMax de Kijai), cubriendo flujos de texto-a-vídeo, imagen-a-vídeo y flujos de primer-último fotograma. En el lado de imágenes impulsa Z-Image, Qwen Image, Flux 2 y Krea 2, con soporte de referencia múltiple para personajes y ubicaciones consistentes entre tomas.
Características del flujo de trabajo
- Storyboard 3D: coloca una cámara virtual en espacio 3D, encuadra tomas visualmente con indicadores FOV y brújula, y recibe advertencias cuando rompes la regla de los 180 grados.
- Sistema de continuidad: las imágenes de referencia mantienen personajes y ubicaciones consistentes entre fotogramas.
- Modo Toma Continua (experimental): encadena interpolación de fotogramas clave entre múltiples segmentos para tomas continuas más largas que un solo clip, cosidas con ffmpeg. Requiere modelos que soporten vídeo desde primer-último fotograma, como LTX Video 2.3 y Wan Video.
- Soporte LoRA en todas partes: sube y aplica LoRAs con deslizadores de fuerza por modelo en las cinco superficies de generación.
- Registro de flujo de trabajo personalizado: construye un flujo de trabajo en ComfyUI, exporta el JSON, súbelo en el panel de configuraciones y aparecerá como un nuevo modelo en cada menú desplegable. La aplicación analiza el JSON, lista cada checkpoint, LoRA y VAE requerido, y marca cuáles ya están presentes en tu carpeta de modelos de ComfyUI.
- Exportación de línea de tiempo: ensambla tomas con diálogo y audio, luego exporta XML para Premiere o DaVinci.
Tracción de la comunidad
La publicación de actualización del 7 de septiembre en r/comfyui atrajo usuarios independientes reportando uso real: uno lo ejecuta en un mini PC Strix Halo bajo Linux, otro tuvo un PR fusionado en el proyecto. La ruta de Docker (docker compose up --build) eliminó el mayor obstáculo de configuración de versiones anteriores.
El hardware mínimo es una tarjeta gráfica de 8 GB para generación de imágenes y clips cortos; 12-16 GB cubre todos los modelos de imagen locales más Wan y MiniMax H3 de vídeo. Una tarjeta gráfica no es obligatoria ya que los controladores en la nube funcionan sin ella.
Disponibilidad
AI Movie Studio 2 tiene licencia AGPL-3.0 y se ejecuta en Python 3.10+ con Node.js 18+. Las guías de configuración, la línea única de Docker y las tablas completas de compatibilidad de modelos están en el README de GitHub. El proyecto está bajo desarrollo activo y el autor indica esperar cambios incompatibles entre actualizaciones.
Comentarios
Inicia sesión con GitHub para unirte a la conversación.