AI Movie Studio 2: Открытая рабочая станция кино для ComfyUI
AI Movie Studio 2: открытая станция ИИ-кинопроизводства для локального ComfyUI: 3D-раскадровка, система непрерывности, режим Long Take и экспорт таймлайна.
Проект создан Натаном МакКоннеллом, специалистом по виртуальному производству и ветераном отдела съёмки, базирующимся в Атланте, который управляет сценами с LED-экранами в SCAD. Первая версия рухнула под собственным списком функций, поэтому версия 2 была перестроена с нуля вокруг одной цели: чистый интерфейс, который следует реальному рабочему процессу кинопроизводства вместо панели управления, включающей всё подряд.
Как это работает с ComfyUI
AI Movie Studio 2 сама ничего не генерирует. Это пилотская кабина режиссёра над вашей существующей установкой: фронтенд на Next.js 14 общается с бэкендом на FastAPI, а «Система драйверов» бэкенда адаптируется к тому движку, на который вы её указываете. Локально это означает ваш запущенный экземпляр ComfyUI по адресу 127.0.0.1:8188; в облаке это означает Fal.ai или Replicate с API-ключом. Интерфейс никогда не меняется.
Поддерживаемые локальные видео-модели в ComfyUI включают LTX Video 2.3, Wan Video (через WanVideoWrapper от Kijai) и MiniMax H3 (через узлы MiniMax от Kijai), охватывая тексты-в-видео, изображения-в-видео и рабочие процессы от первого к последнему кадру. Со стороны изображений он управляет Z-Image, Qwen Image, Flux 2 и Krea 2 с поддержкой множественных ссылок для согласованности персонажей и локаций между кадрами.
Особенности рабочих процессов
- 3D-раскадровка: разместите виртуальную камеру в 3D-пространстве, кадрируйте кадры визуально с индикаторами угла обзора и компаса, получайте предупреждения при нарушении правила 180 градусов.
- Система непрерывности: опорные изображения сохраняют согласованность персонажей и локаций между кадрами.
- Режим Long Take (экспериментальный): цепочка интерполяции ключевых кадров между несколькими сегментами для непрерывных съёмок длиннее одного клипа, склеенные с помощью ffmpeg. Требуются модели, поддерживающие переход от первого и последнего кадра к видео, такие как LTX Video 2.3 и Wan Video.
- Поддержка LoRA везде: загружайте и применяйте LoRA с ползунками силы для каждой модели во всех пяти поверхностях генерации.
- Регистрация пользовательского рабочего процесса: создайте рабочий процесс в ComfyUI, экспортируйте JSON, загрузите его в панели настроек, и он появится как новая модель в каждом выпадающем списке. Приложение парсит JSON, перечисляет каждый необходимый checkpoint, LoRA и VAE, отмечает, какие из них уже присутствуют в папке моделей вашего ComfyUI.
- Экспорт таймлайна: соберите кадры с диалогами и аудио, затем экспортируйте XML для Premiere или DaVinci.
Интерес сообщества
Пост об обновлении от 7 сентября в r/comfyui привлек независимых пользователей, сообщающих о реальном использовании: один запускает его на мини-ПК Strix Halo под Linux, другой внес PR, который был принят в проект. Путь Docker (docker compose up --build) убрал самое большое препятствие настройки из ранних версий.
Минимальное оборудование: видеокарта с 8 ГБ памяти для генерации изображений и коротких клипов; 12-16 ГБ покрывают все локальные модели изображений плюс видео Wan и MiniMax H3. Видеокарта не обязательна, так как облачные драйверы работают без неё.
Доступность
AI Movie Studio 2 лицензируется по AGPL-3.0 и работает на Python 3.10+ с Node.js 18+. Руководства по установке, однострочная команда Docker и полные таблицы совместимости моделей находятся в README на GitHub. Проект находится в активной разработке, и автор отмечает, что следует ожидать изменений, нарушающих обратную совместимость между обновлениями.
Комментарии
Войдите через GitHub, чтобы участвовать в обсуждении.