Comfy Agent:在画布上用 AI 构建 ComfyUI 工作流

ComfyUI Wikinews

Comfy Agent 在画布上直接规划、构建、运行并调试 ComfyUI 工作流,支持可复用技能与最多 5 个并行对话。现已在 Comfy Cloud 上线。

Comfy Org 于 10 月 1 日发布了 Comfy Agent(博客文章 | 产品页面)。自发布首日起,它就对 Comfy Cloud 上的所有用户开放,并承诺几周内推出 Comfy Desktop 版本。该功能目前处于 beta 阶段。

描述您的需求,Comfy Agent 就会规划工作流、把节点放到画布上、将它们连接起来、运行图表,并在出错时反复迭代。它直接在您已经打开的画布上工作,而不是返回一个 JSON 文件让您导入,因此在构建过程中图表始终可见、可编辑。

Comfy Agent 正在规划工作流

Comfy Agent 在 ComfyUI 画布内工作,紧挨着您正在编辑的工作流。

智能代理在画布上组装图表

氛围式构建:智能代理就地搭建图表,工作流始终保持打开且可编辑。

它能做什么

  • 构建和编辑工作流:挑选节点、放置节点、连接节点,并能重构已有的图表。
  • 在获得您许可后运行生成,然后检查输出。在自动模式下,它会自行运行和迭代,直到结果就绪。
  • 解释和调试:打开任意工作流,智能代理会读取整张图表,解释其作用,指出缓慢的部分并追踪错误。
  • 内置精选知识,用于模型推荐和节点选择。
  • 以视觉方式理解资产:它能看见您所看到的图像和文件,您还可以在对话中引用某个节点、库中的资产或另一个工作流。
  • 使用技能:为重复性任务创建并保存您自己的技能,或选用公开的预设技能。

同一画布上的两位协作者

智能代理在您编辑画布的同时也进行编辑,双方都不会把对方锁在外面。您可以从库中拖入资产、按名称提及节点,或者看着图表逐步组装并在过程中调整布局。每个节点和参数都保持在原位:没有任何内容被智能代理隐藏,您可以打开任意节点查看其取值。

从一张产品照片到一组广告变体:智能代理在画布上构建 pipeline,而创作者可以继续工作。

技能、对话与历史记录

最多可并行运行 5 个智能代理对话,每个对话都有自己完整的历史记录。技能是您编写一次便可反复调用的可复用指令,产品页面将其列为打包重复性操作的一种方式。

Comfy Agent、MCP 还是您自己的智能代理

Comfy 已经提供了 MCP 服务器,可让外部智能代理驱动 ComfyUI。产品页面明确了两者之间的界限:

Comfy AgentComfy MCP
它是什么内置于 Comfy 应用中的智能代理。可在画布上一边对话一边构建。用于操作 ComfyUI 的精选知识和原生工具。由您自己的智能代理连接到 ComfyUI。
最适合从初学者到高级构建者、希望实时观看智能代理构建和编辑的用户。已经在使用其他智能代理的用户。
运行于目前是 Comfy Cloud GPU,之后支持本地 GPU。Comfy Cloud GPU,或您的本地 GPU。
自定义节点在 Cloud 上为 Cloud 支持的节点。本地支持上线后可使用任意本地节点。Cloud 上为 Cloud 支持的节点,本地可使用任意节点。

背后由什么驱动

Comfy 表示,该智能代理运行在 Anthropic 的前沿模型 上,并提供了后续切换 LLM 的选项。模型自身无法获得的内容,由智能代理补足:您工作流的完整上下文、您的报错信息,以及 ComfyUI 本身。本地 LLM 支持已在路线图上,Comfy 指出 ComfyUI 可以同时管理图像、视频和语言模型的内存。

新账户可获得一些免费对话进行试用,之后智能代理将消耗 Cloud 上已使用的 Comfy Credits。各套餐详情请见定价页面。

后续计划

  • 本地 ComfyUI 支持:同一个智能代理运行在您的 GPU、您的模型和您的自定义节点上,引导您完成设置并挑选适合您硬件的模型。
  • 智能代理构建的自定义节点:由智能代理为您组装定制化的编辑工具。
  • 更多模型选项、更好的公开技能与知识,以及更多外部集成。

入门

登录 cloud.comfy.org,打开 Agent 面板并领取免费对话额度。先打开一个您保存的工作流,然后让智能代理解释它、修改它,或在新的图像上运行它。

评论

使用 GitHub 登录后即可参与讨论。

评论加载中…
Comfy Agent:在画布上用 AI 构建 ComfyUI 工作流 | ComfyUI Wiki