Comfy Agent : créez des workflows ComfyUI avec l'IA sur la toile

ComfyUI Wikinews

Comfy Agent planifie, construit, exécute et débogue des workflows ComfyUI sur la toile, avec des compétences réutilisables et jusqu'à 5 chats en parallèle.

Comfy Org a annoncé Comfy Agent le 1er octobre (article de blog | page produit). Il est ouvert à tous sur Comfy Cloud dès le premier jour, et une version pour Comfy Desktop est promise dans quelques semaines. La fonctionnalité est en bêta.

Décrivez ce que vous voulez et Comfy Agent planifie le flux de travail, dépose les nœuds sur la toile, les connecte entre eux, exécute le graphique et itère quand quelque chose casse. Il travaille sur la toile que vous avez déjà ouverte au lieu de vous renvoyer un fichier JSON à importer : le graphique reste ainsi visible et modifiable pendant qu'il se construit.

Comfy Agent planifiant un flux de travail

Comfy Agent agit directement dans la toile ComfyUI, à côté du flux de travail que vous modifiez.

L'agent assemblant un graphique sur la toile

Vibe crafting : l'agent construit le graphique sur place pendant que le flux de travail reste ouvert et modifiable.

Ce qu'il fait

  • Construit et modifie des flux de travail : il choisit les nœuds, les place, les connecte et peut restructurer un graphique existant.
  • Exécute des générations avec votre autorisation, puis examine la sortie. En mode auto, il exécute et itère de lui-même jusqu'à ce que le résultat soit prêt.
  • Explique et débogue : ouvrez n'importe quel flux de travail et l'agent lit tout le graphique, explique ce qu'il fait, signale les parties lentes et trace les erreurs.
  • Intègre des connaissances sélectionnées pour les recommandations de modèles et la sélection des nœuds.
  • Comprend les ressources visuellement : il voit les images et les fichiers que vous voyez, et vous pouvez faire référence à un nœud, à une ressource de la bibliothèque ou à un autre flux de travail dans le chat.
  • Utilise des compétences : créez et enregistrez les vôtres pour des tâches répétitives, ou adoptez des compétences publiques prédéfinies.

Deux sur une même toile

L'agent modifie la toile en même temps que vous, sans que l'un bloque l'autre. Vous pouvez faire glisser une ressource depuis la bibliothèque, mentionner un nœud par son nom, ou regarder le graphique s'assembler et déplacer des éléments au fur et à mesure. Chaque nœud et paramètre reste à sa place : rien n'est caché derrière l'agent, et vous pouvez ouvrir n'importe quel nœud pour vérifier ses valeurs.

D'une photo de produit à une série de variantes publicitaires : l'agent construit le pipeline sur la toile pendant que l'artiste continue de travailler.

Compétences, chats et historique

Jusqu'à 5 chats d'agent peuvent fonctionner en parallèle, chacun avec son propre historique complet. Les compétences sont des instructions réutilisables que vous écrivez une fois et rappelez ensuite ; la page produit les présente comme un moyen d'empaqueter les choses que vous faites sans cesse.

Agent, MCP ou votre propre agent

Comfy fournit déjà un serveur MCP qui permet à un agent externe de piloter ComfyUI. La page produit établit la distinction entre les deux :

Comfy AgentComfy MCP
Ce que c'estL'agent intégré à l'application Comfy. Discutez et construisez ensemble sur la toile.Des connaissances sélectionnées et des outils natifs pour piloter ComfyUI. Votre propre agent, connecté à ComfyUI.
Idéal pourDes débutants aux créateurs avancés qui veulent voir l'agent construire et modifier en temps réel.Les personnes qui travaillent déjà dans un autre agent.
Fonctionne surLes GPU de Comfy Cloud maintenant, les GPU locaux plus tard.Les GPU de Comfy Cloud, ou votre GPU local.
Nœuds personnalisésLes nœuds pris en charge par le cloud sur le Cloud. N'importe quel nœud local quand la prise en charge locale arrivera.Pris en charge par le cloud sur le Cloud, n'importe quel nœud en local.

Ce qui l'alimente

Comfy indique que l'agent fonctionne sur des modèles de pointe d'Anthropic, avec la possibilité de basculer vers d'autres LLM en cours de route. Ce que le modèle n'obtient pas seul, l'agent l'ajoute : le contexte complet de votre flux de travail, vos erreurs et ComfyUI lui-même. La prise en charge des LLM locaux est au programme, et Comfy précise que ComfyUI peut gérer la mémoire des modèles d'image, de vidéo et de langue en même temps.

Les nouveaux comptes bénéficient de quelques chats gratuits pour l'essayer, et après cela l'agent puise dans les Comfy Credits déjà utilisés sur le Cloud. Consultez la page des tarifs pour connaître les offres.

Prochaines étapes

  • Prise en charge de ComfyUI en local : le même agent exécuté sur votre GPU, vos modèles et vos nœuds personnalisés, qui vous guide dans la configuration et choisit les modèles adaptés à votre matériel.
  • Nœuds personnalisés créés par l'agent : l'agent qui assemble des outils d'édition personnalisés pour vous.
  • Davantage d'options de modèles, de meilleures compétences et connaissances publiques, et plus d'intégrations externes.

Commencer

Connectez-vous sur cloud.comfy.org, ouvrez le panneau Agent et récupérez les chats gratuits. Ouvrez d'abord l'un de vos flux de travail enregistrés, puis demandez à l'agent de l'expliquer, de le modifier ou de l'exécuter sur de nouvelles images.

Commentaires

Connectez-vous avec GitHub pour rejoindre la discussion.

Chargement des commentaires…
Comfy Agent : créez des workflows ComfyUI avec l'IA sur la toile | ComfyUI Wiki