LTX Ripple:编辑单帧并将效果扩散至整个视频

ComfyUI Wikinews

LTX Ripple 是面向 LTX-2.5 的首帧全帧 IC-LoRA:编辑首帧后,更改将传播至整个视频,同时保持运动和时序完整。

LTX Ripple (Hugging Face) 是 WepeNerdLTX-2.5 打造的 首帧全帧 (FFAF) IC-LoRA。您可以在任何图像编辑器中编辑视频的首帧,LoRA 会将该编辑传播到剩余片段,同时保留原始的运动、时序、相机移动和未变化的内容。

工作原理

该管道设计得非常简单:

  1. 输入您的来源视频。
  2. 在任何图像编辑器中编辑并替换其首帧。
  3. LTX Ripple 围绕该编辑重新生成视频的其余部分。

简短的描述有帮助,但 LoRA 甚至可以完全不使用提示词工作。因为 LTX-2.5 已经理解来源视频的运动,编辑会“扩散”开来:效果通过相机剪辑附着在物体上,材质正确包裹几何体,交换的角色继续跟随原始表演。

功能特性

模型卡片展示了广泛的应用,均由单个编辑过的首帧驱动:

  • 添加特效(火焰、液体、光照)
  • 3D 模型重纹理化和从陶土渲染进行建筑可视化纹理化
  • 风格变化,包括仅更改一名演员的风格
  • 场景反应的光源和一天中的时间变化
  • 角色属性变化、服装更换和换脸
  • 背景和天气变化
  • 标题或标志替换
  • 对象添加、移除和替换
  • 锐化或模糊

首帧中添加的液体随原始玻璃运动流动:

光照和 VFX 变化通过相机剪辑扩散:

ComfyUI 使用

推荐的强度设置为 1.35。当编辑传递不够强烈时增加它;当输出开始改变应保持相同的内容时减少它。

默认工作流提示词是:

Use the reference video for motion, timing, camera movement, composition, and unchanged scene content, while consistently propagating the visual edit established in the first frame throughout the video.

对于困难的编辑,添加对更改后的首帧的简短描述(新的光照、对象、材质、风格或背景),以便模型知道要保持一致。

限制

首帧是唯一的控制信号,因此粗糙的编辑会产生粗糙的视频。非常大的更改、严重遮挡、快速运动或从未出现在来源视频中的内容会降低一致性。结果还取决于 LTX-2.5 检查点、分辨率、帧数和可用硬件。

链接

评论

使用 GitHub 登录后即可参与讨论。

评论加载中…
LTX Ripple:编辑单帧并将效果扩散至整个视频 | ComfyUI Wiki