Comfy Agent: AI로 캔버스에서 ComfyUI 워크플로 만들기

ComfyUI Wikinews

Comfy Agent는 캔버스 자체에서 ComfyUI 워크플로를 계획하고, 만들고, 실행하고, 디버깅합니다. 재사용 가능한 스킬과 최대 5개의 병렬 채팅을 지원하며, 지금 Comfy Cloud에서 사용할 수 있습니다.

Comfy Org는 10월 1일 Comfy Agent를 발표했습니다 (블로그 포스트 | 제품 페이지). 첫날부터 Comfy Cloud에서 누구나 사용할 수 있으며, Comfy Desktop 버전도 몇 주 안에 제공될 예정입니다. 이 기능은 베타 상태입니다.

원하는 것을 설명하면 Comfy Agent가 워크플로를 계획하고, 캔버스에 노드를 배치하고, 서로 연결하고, 그래프를 실행하며, 문제가 생기면 반복해서 수정합니다. 가져올 JSON 파일을 돌려주는 방식이 아니라 이미 열려 있는 캔버스에서 작업하므로, 그래프가 만들어지는 동안에도 계속 보이고 편집할 수 있습니다.

워크플로를 계획하는 Comfy Agent

Comfy Agent는 편집 중인 워크플로 옆, ComfyUI 캔버스 안에서 동작합니다.

캔버스에서 그래프를 조립하는 에이전트

바이브 크래프팅: 에이전트가 그래프를 그 자리에서 만들고, 워크플로는 열린 채로 편집 가능한 상태로 유지됩니다.

주요 기능

  • 워크플로 생성 및 편집: 노드를 고르고 배치하고 연결하며, 기존 그래프를 재구성할 수도 있습니다.
  • 사용자 허가를 받아 생성 작업을 실행하고 결과를 검토합니다. 자동 모드에서는 결과가 준비될 때까지 스스로 실행하고 반복합니다.
  • 설명 및 디버깅: 아무 워크플로나 열면 에이전트가 그래프 전체를 읽고 무슨 일을 하는지 설명하며, 느린 부분을 짚고 오류를 추적합니다.
  • 정제된 지식 제공: 모델 추천과 노드 선택을 지원합니다.
  • 에셋을 시각적으로 이해: 사용자가 보는 이미지와 파일을 함께 보며, 채팅에서 노드나 라이브러리의 에셋, 다른 워크플로를 참조할 수 있습니다.
  • 스킬 사용: 반복 작업용 스킬을 직접 만들어 저장하거나, 공개 프리셋 스킬을 가져다 쓸 수 있습니다.

하나의 캔버스에 둘이 함께

에이전트가 캔버스를 편집하는 동안 사용자도 함께 편집할 수 있으며, 어느 쪽도 상대를 잠그지 않습니다. 라이브러리에서 에셋을 드래그하거나 노드를 이름으로 멘션하거나, 그래프가 조립되는 과정을 지켜보며 요소를 옮길 수 있습니다. 모든 노드와 파라미터는 원래 위치에 그대로 있습니다. 에이전트 뒤에 숨겨지는 것은 없고, 아무 노드나 열어 값을 확인할 수 있습니다.

제품 사진에서 광고 변형 세트까지: 아티스트가 계속 작업하는 동안 에이전트가 캔버스에서 파이프라인을 만듭니다.

스킬, 채팅, 기록

최대 5개의 에이전트 채팅을 병렬로 실행할 수 있으며, 각각 전체 기록을 따로 유지합니다. 스킬은 한 번 작성해 두고 다시 호출하는 재사용 가능한 지시문이며, 제품 페이지에서는 반복적으로 하는 작업을 묶어 두는 방법으로 소개합니다.

에이전트, MCP, 또는 나만의 에이전트

Comfy는 이미 외부 에이전트가 ComfyUI를 제어할 수 있는 MCP 서버를 제공합니다. 제품 페이지에서는 두 방식의 차이를 이렇게 구분합니다.

Comfy AgentComfy MCP
정의Comfy 앱에 내장된 에이전트. 캔버스에서 함께 채팅하고 만듭니다.ComfyUI를 운용하기 위한 정제된 지식과 네이티브 도구. 나만의 에이전트를 ComfyUI에 연결합니다.
적합한 사용자에이전트가 실시간으로 만들고 편집하는 모습을 보고 싶은 초보자부터 고급 빌더까지.이미 다른 에이전트로 작업하는 사람.
실행 환경현재는 Comfy Cloud GPU, 이후 로컬 GPU.Comfy Cloud GPU 또는 로컬 GPU.
커스텀 노드Cloud에서는 Cloud가 지원하는 노드. 로컬 지원이 출시되면 모든 로컬 노드.Cloud에서는 Cloud 지원 노드, 로컬에서는 모든 노드.

무엇으로 구동되나

Comfy에 따르면 에이전트는 Anthropic의 프런티어 모델로 실행되며, 도중에 LLM을 전환할 수 있는 옵션도 있습니다. 모델이 스스로 갖추지 못한 부분은 에이전트가 채웁니다. 워크플로의 전체 컨텍스트, 오류, 그리고 ComfyUI 자체입니다. 로컬 LLM 지원은 로드맵에 있으며, Comfy는 ComfyUI가 이미지, 비디오, 언어 모델의 메모리를 동시에 관리할 수 있다고 언급합니다.

새 계정에는 체험용 무료 채팅이 제공되며, 그 이후에는 Cloud에서 이미 사용 중인 Comfy 크레딧이 차감됩니다. 요금제는 가격 페이지를 참고하세요.

앞으로의 계획

  • 로컬 ComfyUI 지원: 동일한 에이전트가 사용자의 GPU, 모델, 커스텀 노드에서 실행되며 설정 과정을 안내하고 하드웨어에 맞는 모델을 골라 줍니다.
  • 에이전트가 만드는 커스텀 노드: 에이전트가 맞춤형 편집 도구를 조립해 줍니다.
  • 더 많은 모델 옵션, 더 나은 공개 스킬과 지식, 그리고 더 많은 외부 통합.

시작하기

cloud.comfy.org에 로그인하고 Agent 패널을 열어 무료 채팅을 받으세요. 먼저 저장된 워크플로 중 하나를 열고, 에이전트에게 설명을 요청하거나 변경하거나 새 이미지로 실행해 달라고 요청해 보세요.

댓글

GitHub로 로그인하고 토론에 참여하세요.

댓글을 불러오는 중…
Comfy Agent: AI로 캔버스에서 ComfyUI 워크플로 만들기 | ComfyUI Wiki