PixlStash 2.0 从你自己的图像资源库训练 LoRA

ComfyUI Wikinews

PixlStash 2.0 为其与 ComfyUI 关联的图像资源库新增了基于 AI-toolkit 的 LoRA 训练、人脸相似度聚类和角色设定图功能。

PixlStash 2.0 于 11 月 10 日发布(v2.0.0),并于 11 月 16 日推出修复版本 2.0.1。它是一款桌面图像资源库,可与 ComfyUI 和 AI-toolkit 关联:你把图片保存在可搜索的数据库中,生成与 LoRA 训练都在同一个窗口里、用你自己的 GPU 运行。
PixlStash 工作流工作区,显示工作流卡片以及所选工作流的模型、LoRA 和参数

工作流以卡片形式呈现,卡片上铺满它们生成的图片。检查器会列出每个工作流的模型、LoRA、参数和更早的版本。

不离开资源库就能训练 LoRA

本次最亮眼的新增功能是 Train LoRA(训练 LoRA)。右键点击某个人物或某个集合,选择照片中的主体以及训练的强度,应用便会在你的 GPU 上运行 AI-toolkit。训练完成的 LoRA 会进入模型架,并关联到该人物,因此下一次生成无需把文件复制进 ComfyUI,也无需重新加载模型即可调用它。

某个人物的人脸相似度聚类,按长相相似的对象分组

人脸会按相似度分组。保留真正属于该人物的那一组,就能把形似但并非本人的照片从训练集中剔除。

有两个辅助功能为这一训练集提供素材:

  • 人脸相似度聚类:把某个人物的所有人脸按长相相似程度分组,让生成失败的图片在训练前被剔除。
  • 创建训练集:在特写、全身照和表情之间挑选相似度与图像质量最佳的照片,跳过近似重复的图片和其他人物。

为没有图片的角色生成角色设定图

当某个人物的参考图太少时,生成角色设定图会直接画出这些图:每张设定图画该角色六次,四张证件照风格照片(正面、四分之三侧面、侧脸)加两张全身照。每张设定图都会报告它与原始参考的匹配程度,图上的每张照片也同样如此。保留的设定图会成为该角色的图片,其余的则进入废件区。

为陶瓷花园侏儒生成的角色设定图

为仅凭一张图片构建的角色生成的设定图。工作流可选,包括 FLUX.2 Klein 9B 和 Qwen Image Edit 2.1。

角色设定图工作流已针对 Krea 2、MOSS-Image、FLUX.2 Klein 9B 和 Qwen Image Edit 2.1 调优,视频工作流也走同一条路径。

双向 ComfyUI 关联

PixlStash 节点包支持双向工作:既可以从 PixlStash 运行工作流,也可以把 PixlStash 的加载器节点和保存器节点放进你自己的画面,让结果返回时自动带上所属人物、集合和项目标签。

ComfyUI 工作流中的 PixlStash 加载器节点和保存器节点

保存器节点会把生成结果写回资源库,并附上提示词、模型、LoRA 权重和种子。

本次发布的更新还包括:

  • 三个工作区:把应用划分为媒体、工作流和模型三部分,各自拥有独立的侧边栏。
  • 模型架:跨所有硬盘统一呈现,移动文件夹时索引保持完整。
  • 多个 ComfyUI 连接:笔记本可以把任务排队到渲染主机上,显存不足的运行会进入等待而不是直接失败。

入门

从发布页面安装适用于 Windows、Linux 或 macOS 的桌面版,或使用 Docker 镜像 ghcr.io/pikselkroken/pixlstash 以无头模式运行。服务器界面的演示位于 demo.pixlstash.dev。

然后打开 设置 › ComfyUI:应用会自动找到本地的 ComfyUI,在其中安装节点并建立关联。这些节点也已在 ComfyUI Registry 上以 pixlstash 为名提供,下载量约 4,500 次。所有功能都在本地运行,支持 CUDA、Apple Silicon 或 ROCm;训练部分需要 AI-toolkit。

评论

使用 GitHub 登录后即可参与讨论。

评论加载中…
PixlStash 2.0 从你自己的图像资源库训练 LoRA | ComfyUI Wiki