LuminaBrush: ControlNet作者推出AI光照编辑工具
lllyasviel,著名的 ControlNet 和 IC-Light 系列模型的作者,发布了一款新的 AI 图像编辑工具 LuminaBrush。这款工具将 AI 技术与直观的用户交互相结合,为创作者提供了实用的图像光照编辑解决方案。
LuminaBrush 工作原理
LuminaBrush 采用了两阶段处理框架:
-
统一光照转换阶段:
- 将输入图像转换为”统一光照”外观
- 消除原始图像中复杂的光照效果
- 生成适合进一步编辑的中间表示
-
交互式光照编辑阶段:
- 基于用户的笔刷输入生成定向光照效果
- 实时响应用户的编辑操作
- 保持光照传输的一致性
LuminaBrush 的技术特点
-
统一光照预处理:
- 独特的去光照技术,可以提取图像的基础外观
- 支持处理皮肤纹理、头发、毛发等细节
- 避免了3D反照率带来的过度锐利网格边界或过度平坦表面
-
智能光照合成:
- 使用随机法线图重新照明训练
- 从数百万张高质量图像中提取统一光照表现
- 构建配对数据集用于训练交互式光照绘制模型
LuminaBrush 应用场景
- 艺术创作:为艺术家提供直观的光照效果控制
- 图像编辑:支持局部和全局光照调整
- 照片修复:可用于修正不理想的光照条件
- 视觉效果:适用于电影和游戏视觉效果制作
在线体验 LuminaBrush
目前,LuminaBrush 提供两个在线演示版本:
Git仓库
- 访问 GitHub 仓库