LTX Ripple:编辑单帧并将效果扩散至整个视频
ComfyUI Wikinews
LTX Ripple 是面向 LTX-2.5 的首帧全帧 IC-LoRA:编辑首帧后,更改将传播至整个视频,同时保持运动和时序完整。
LTX Ripple (Hugging Face) 是 WepeNerd 为 LTX-2.5 打造的 首帧全帧 (FFAF) IC-LoRA。您可以在任何图像编辑器中编辑视频的首帧,LoRA 会将该编辑传播到剩余片段,同时保留原始的运动、时序、相机移动和未变化的内容。
工作原理
该管道设计得非常简单:
- 输入您的来源视频。
- 在任何图像编辑器中编辑并替换其首帧。
- LTX Ripple 围绕该编辑重新生成视频的其余部分。
简短的描述有帮助,但 LoRA 甚至可以完全不使用提示词工作。因为 LTX-2.5 已经理解来源视频的运动,编辑会“扩散”开来:效果通过相机剪辑附着在物体上,材质正确包裹几何体,交换的角色继续跟随原始表演。
功能特性
模型卡片展示了广泛的应用,均由单个编辑过的首帧驱动:
- 添加特效(火焰、液体、光照)
- 3D 模型重纹理化和从陶土渲染进行建筑可视化纹理化
- 风格变化,包括仅更改一名演员的风格
- 场景反应的光源和一天中的时间变化
- 角色属性变化、服装更换和换脸
- 背景和天气变化
- 标题或标志替换
- 对象添加、移除和替换
- 锐化或模糊
首帧中添加的液体随原始玻璃运动流动:
光照和 VFX 变化通过相机剪辑扩散:
ComfyUI 使用
推荐的强度设置为 1.35。当编辑传递不够强烈时增加它;当输出开始改变应保持相同的内容时减少它。
默认工作流提示词是:
Use the reference video for motion, timing, camera movement, composition, and unchanged scene content, while consistently propagating the visual edit established in the first frame throughout the video.对于困难的编辑,添加对更改后的首帧的简短描述(新的光照、对象、材质、风格或背景),以便模型知道要保持一致。
限制
首帧是唯一的控制信号,因此粗糙的编辑会产生粗糙的视频。非常大的更改、严重遮挡、快速运动或从未出现在来源视频中的内容会降低一致性。结果还取决于 LTX-2.5 检查点、分辨率、帧数和可用硬件。
评论
使用 GitHub 登录后即可参与讨论。