Comfy Agent: AIでキャンバス上にComfyUIワークフローを構築

ComfyUI Wikinews

Comfy Agentはキャンバス上でComfyUIワークフローを計画、構築、実行、デバッグします。再利用可能なスキルと最大5つの並列チャットを備えています。Comfy Cloudで公開中です。

Comfy Orgは10月1日にComfy Agentを発表しました(ブログ記事 | 製品ページ)。初日からComfy Cloudですべての人が利用でき、Comfy Desktop版も数週間で提供予定です。この機能はベータ版です。

作りたいものを説明するだけで、Comfy Agentがワークフローを計画し、ノードをキャンバスに配置して接続し、グラフを実行し、問題が起きれば反復して修正します。インポート用のJSONファイルを返すのではなく、すでに開いているキャンバス上で動作するため、グラフは構築中も表示・編集可能なままです。

Comfy Agentがワークフローを計画する様子

Comfy Agentは、編集中のワークフローの隣、ComfyUIキャンバスの内側で動作します。

エージェントがキャンバス上でグラフを組み立てる様子

バイブクラフト: ワークフローを開いたまま編集可能な状態で、エージェントがその場でグラフを構築します。

できること

  • ワークフローの構築と編集: ノードを選び、配置し、接続し、既存のグラフを再構成することもできます。
  • あなたの許可を得て生成を実行し、その出力を確認します。自動モードでは、結果が整うまで自ら実行と反復を繰り返します。
  • 説明とデバッグ: 任意のワークフローを開くと、エージェントがグラフ全体を読み取り、その内容を説明し、遅い部分を指摘し、エラーを追跡します。
  • 厳選された知識を活用: モデルの推奨やノードの選択に対応します。
  • アセットを視覚的に理解: あなたが見ている画像やファイルをエージェントも見ることができ、チャットでノード、ライブラリのアセット、別のワークフローを参照できます。
  • スキルを利用: 繰り返しのタスク用に独自のスキルを作成・保存したり、公開されているプリセットスキルを使ったりできます。

1つのキャンバスに2人

エージェントはあなたと同時にキャンバスを編集し、どちらかが他方を締め出すことはありません。ライブラリからアセットをドラッグしたり、ノードを名前でメンションしたり、グラフが組み上がる様子を眺めながら途中で物を動かしたりできます。すべてのノードとパラメータはその場に残ります。何もエージェントの背後に隠れることはなく、任意のノードを開いて値を確認できます。

製品写真から広告バリエーション一式へ。エージェントがキャンバス上でパイプラインを構築する間も、アーティストは作業を続けられます。

スキル、チャット、履歴

最大5つのエージェントチャットを並列で実行でき、それぞれに完全な履歴が付きます。スキルは一度書いて何度も呼び出せる再利用可能な指示で、製品ページでは繰り返し行う作業をパッケージ化する方法として紹介されています。

エージェント、MCP、自前のエージェント

Comfyはすでに、外部のエージェントからComfyUIを操作できるMCPサーバーを提供しています。製品ページでは両者の違いを次のように示しています。

Comfy AgentComfy MCP
概要Comfyアプリに組み込まれたエージェント。キャンバス上で一緒にチャットして構築します。ComfyUIを操作するための厳選された知識とネイティブツール。自前のエージェントをComfyUIに接続します。
最適な用途エージェントがリアルタイムで構築・編集する様子を見たい、初心者から高度なビルダーまで。すでに別のエージェントで作業している人。
実行環境現在はComfy CloudのGPU、後でローカルGPU。Comfy CloudのGPU、またはローカルGPU。
カスタムノードCloudではCloud対応ノード。ローカルサポートが実装されれば任意のローカルノード。CloudではCloud対応、ローカルでは任意のノード。

動作を支える基盤

Comfyによれば、エージェントはAnthropicのフロンティアモデル上で動作し、途中でLLMを切り替えるオプションもあります。モデルだけでは得られないものを、エージェントが補います。ワークフローの完全なコンテキスト、あなたのエラー、そしてComfyUIそのものです。ローカルLLMサポートはロードマップ上にあり、ComfyはComfyUIが画像、動画、言語モデルのメモリを同時に管理できると述べています。

新規アカウントには試用できる無料チャットが付いており、その後はCloudですでに使用されているComfyクレジットを消費します。プランについては料金ページをご覧ください。

今後の予定

  • ローカルComfyUIサポート: 同じエージェントをあなたのGPU、モデル、カスタムノード上で実行し、セットアップを案内しながらハードウェアに合うモデルを選びます。
  • エージェントが構築するカスタムノード: エージェントがあなた向けにカスタマイズされた編集ツールを組み立てます。
  • より多くのモデルオプション、より良い公開スキルと知識、より多くの外部統合。

はじめに

cloud.comfy.orgにログインし、Agentパネルを開いて無料チャットを受け取りましょう。まず保存済みのワークフローを1つ開き、それからエージェントに説明、変更、または新しい画像での実行を依頼してください。

コメント

GitHubでサインインしてディスカッションに参加しましょう。

コメントを読み込み中…
Comfy Agent: AIでキャンバス上にComfyUIワークフローを構築 | ComfyUI Wiki