Vlo 0.3:带实时 ComfyUI 桥接的开源视频编辑器

ComfyUI Wikinews

Vlo 0.3 是一款免费开源的视频编辑器,可直接从时间线驱动 ComfyUI:支持 MiniMax H3 与 Qwen 工作流、SAM2 遮罩、调色以及帧精确导出。

Vlo v0.3.0 已于 9 月 28 日发布(发布说明)。Vlo 是一款免费、本地运行的开源视频编辑器,它把 ComfyUI 当作生成引擎:你在时间线上选中一段区间,Vlo 会把帧和遮罩发送到 ComfyUI 工作流,生成结果作为图层返回,你可以继续剪辑。它既能驱动你已经在运行的 ComfyUI,也能连接远程 ComfyUI,还能自行安装并启动 ComfyUI。
Vlo 项目浏览器,显示最近项目与生成预设

Vlo 以项目为单位。项目保存在你的磁盘上,无论应用运行在本机还是连接远程 GPU,都可以打开。

ComfyUI 桥接

0.3.0 最核心的变化是实时 ComfyUI 桥接,作者形容它可以让你在编辑器中运行任何可能的 ComfyUI 工作流,而不局限于固定的功能菜单:

  • 时间线选区、图像和视频会被发送出去,Vlo 会将生成的媒体捕获回项目中。
  • 自动处理宽高比,让视频模型无需经历裁剪再拼接的繁琐流程,就能编辑任意形状的素材。
  • 面向真实工作流:Vlo 内置了一套 sidecar 规则系统,用于宽高比调整、遮罩处理和控件暴露,并附带演示这些能力的默认工作流。
  • ComfyUI 仍是 ComfyUI。你可以使用内置的生成面板,也可以从应用内直接打开 ComfyUI。当 Vlo 启动 ComfyUI 时,会传入 --enable-manager --preview-method latent2rgb,因此 ComfyUI-Manager 可用,采样过程会实时推流预览。
Vlo 主编辑器,包含时间线、查看器和 ComfyUI 生成面板

编辑器、时间线与生成面板共处同一个窗口。片段也可以交给 ComfyUI 在时间线上的任意位置进行编辑。

应用随附 18 个工作流,涵盖 MiniMax H3(图生视频、参考生视频、遮罩引导、帧到帧、图像修复)、Qwen Image 2.1 Edit、Krea 2 Turbo、LTX-2.5(包括图像修复、clean plate 和 IC edit)、Flux 2 Klein、VACE 图像修复、面向图像和视频的 SeedVR2 图像放大,以及 GIMM 帧插值。它们使用了你可能已经装有的社区节点包,包括 Kijai 的 WanVideoWrapper 和 KJNodes、Lightricks 的 LTXVideo 包、ComfyUI-Spectrum-MiniMax-H3、VideoHelperSuite、controlnet_aux 以及 PxTicks 自家的 ComfyUI-vlo 节点。另有一个辅助脚本可安装缺失的节点。

0.3.0 还有哪些新内容

  • Sam-audio 音轨分离,可将一个片段的人声、乐器和效果分离出来分别编辑。
  • 复合片段与子时间线,以及可为整条时间线套用调色的调整片段。
  • 调色、转场(溶解、滑入等)以及片段图层的混合模式。
  • 全新的帧图渲染器:实时预览与导出现在遵循同一套渲染计划,这正是实现帧精确输出的前提。
  • 扩展 SDK,并承诺在此基础上构建每个片段的工作区。
  • 托管安装 ComfyUI、SAM2 和 Sam-Audio,让应用可以自行配置后端。
Vlo 调色控制项

调色、关键帧和滤镜效果与生成工具放在一起,而不是散落在另一个独立应用中。

编辑功能

应用中非生成的那一半是一个时间线编辑器,而不是提示词面板:SAM2 点编辑器与遮罩,并为视频图像修复提供自动裁剪与拼接;遮罩运算(并集、交集等);关键帧与用于变换的曲线编辑器;可吸附的标记;节拍检测;可拖拽的运动路径;支持热插拔生成分组的资产组织;以及多轨音频工具。

依赖项

Vlo 运行在基于 Chromium 的浏览器中(Chrome、Edge 以及其他 Chromium 版本),因为它使用 File System Access API 进行磁盘上的项目管理,并通过 mediabunny 和 WebCodecs 渲染媒体以实现帧精确。这意味着不支持 Firefox。唯一的安装前提是 git;如果你还没有合适的版本,安装程序会获取 Node.js、Python 和 uv。

获取方式

0.4.0 版本计划带来用于资源和参数共享的全新图数据模型、用于变换与调色的基于图的着色器执行,以及每个片段的工作区模式。

评论

使用 GitHub 登录后即可参与讨论。

评论加载中…
Vlo 0.3:带实时 ComfyUI 桥接的开源视频编辑器 | ComfyUI Wiki