Vlo 0.3: открытый видеоредактор с живым мостом к ComfyUI

ComfyUI Wikinews

Vlo 0.3 это бесплатный видеоредактор, который управляет ComfyUI с таймлайна: процессы MiniMax H3 и Qwen, маскирование SAM2 и покадровый экспорт.

Vlo v0.3.0 вышла 28 сентября (примечания к выпуску). Vlo это бесплатный локальный видеоредактор с открытым исходным кодом, который использует ComfyUI как движок генерации: вы выбираете участок на таймлайне, Vlo отправляет кадры и маски в рабочий процесс ComfyUI, а результат возвращается слоем, который можно дальше монтировать. Он может управлять уже запущенным у вас ComfyUI, удалённым экземпляром или сам установить и запустить ComfyUI.
Браузер проектов Vlo с недавними проектами и пресетами генерации

Vlo работает на основе проектов. Проекты хранятся на вашем диске и открываются независимо от того, запущено приложение на вашей машине или на удалённом GPU.

Мост к ComfyUI

Главное изменение в 0.3.0 это живой мост к ComfyUI, который, по словам автора, позволяет запускать любой возможный рабочий процесс ComfyUI прямо из редактора, а не выбирать из фиксированного набора функций:

  • Выделенные на таймлайне фрагменты, изображения и видео отправляются наружу, а Vlo захватывает сгенерированные медиа обратно в проект.
  • Автоматическая работа с соотношением сторон: видеомодель может редактировать материал любой формы без танцев с обрезкой и склейкой.
  • Внимание к реальным рабочим процессам: Vlo поставляется с системой sidecar-правил для настройки соотношения сторон, обработки масок и экспонирования виджетов, а также со стандартными рабочими процессами, которые это демонстрируют.
  • ComfyUI остаётся ComfyUI. Вы можете использовать встроенную панель генерации или открыть сам ComfyUI прямо из приложения. Когда Vlo запускает ComfyUI, он передаёт --enable-manager --preview-method latent2rgb, так что ComfyUI-Manager на месте, а выборка транслирует живой предпросмотр.
Основной редактор Vlo с таймлайном, просмотрщиком и панелью генерации ComfyUI

Редактор, таймлайн и панель генерации в одном окне. Клипы также можно передавать в ComfyUI для правок в любом месте таймлайна.

Вместе с приложением поставляется восемнадцать рабочих процессов: MiniMax H3 (изображение в видео, референс в видео, masked guide, кадр в кадр, инпейтинг), Qwen Image 2.1 Edit, Krea 2 Turbo, LTX-2.5 (включая инпейтинг, clean plate и IC edit), Flux 2 Klein, VACE инпейтинг, увеличение разрешения SeedVR2 для изображений и видео и интерполяция кадров GIMM. Они используют пакеты узлов от сообщества, которые у вас, возможно, уже есть: WanVideoWrapper и KJNodes от Kijai, пакет LTXVideo от Lightricks, ComfyUI-Spectrum-MiniMax-H3, VideoHelperSuite, controlnet_aux и собственные узлы ComfyUI-vlo от PxTicks. Вспомогательный скрипт установит отсутствующие.

Что ещё нового в 0.3.0

  • Разделение на стемы с помощью Sam-audio: вокал, инструменты и эффекты клипа можно разделить для монтажа.
  • Составные клипы и субтаймлайны, а также корректирующие клипы, применяющие цветокоррекцию ко всему таймлайну.
  • Цветокоррекция, переходы (растворение, slide-in и другие) и режимы наложения для слоёв клипов.
  • Новый рендерер frame-graph: живой предпросмотр и экспорт теперь следуют одному и тому же плану рендеринга, что и делает возможным покадровый вывод.
  • SDK расширений, на основе которого обещают сделать рабочее пространство для каждого клипа.
  • Управляемая установка ComfyUI, SAM2 и Sam-Audio, чтобы приложение могло настраивать собственные бэкенды.
Элементы управления цветокоррекцией в Vlo

Цветокоррекция, ключевые кадры и эффекты фильтров находятся рядом с генеративными инструментами, а не в отдельном приложении.

Возможности редактирования

Негенеративная половина приложения это скорее таймлайн-редактор, чем панель промптов: редактор точек SAM2 и маскирование с автоматической обрезкой и склейкой для видеоинпейтинга, алгебра масок (объединения, пересечения и прочее), ключевые кадры и сплайн-редактор для трансформаций, привязываемые маркеры, детекция бита, перетаскиваемые траектории движения, организация ассетов с горячей заменой групп генерации и многодорожечные аудиоинструменты.

Требования

Vlo работает в браузерах на базе Chromium (Chrome, Edge и другие сборки Chromium), поскольку использует File System Access API для управления проектами на диске и рендерит медиа через mediabunny и WebCodecs для покадровой точности. Это значит, что Firefox не поддерживается. Единственное требование для установки: git; установщик сам загрузит Node.js, Python и uv, если подходящих версий у вас ещё нет.

Доступность

В версии 0.4.0 планируется новая графовая модель данных для совместного использования ресурсов и параметров, графовое выполнение шейдеров для трансформаций и цветокоррекции, а также режим рабочего пространства для каждого клипа.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…
Vlo 0.3: открытый видеоредактор с живым мостом к ComfyUI | ComfyUI Wiki