PixlStash 2.0 : entraîner des LoRA depuis sa bibliothèque d'images

ComfyUI Wikinews

PixlStash 2.0 ajoute l'entraînement de LoRA via AI-toolkit, des clusters de ressemblance faciale et des planches de personnage à sa bibliothèque d'images liée à ComfyUI.

PixlStash 2.0 est sorti le 10 novembre (v2.0.0), avec un correctif 2.0.1 le 16 novembre. C'est une bibliothèque d'images de bureau reliée à ComfyUI et AI-toolkit : vous conservez vos images dans une base de données interrogeable, et la génération comme l'entraînement de LoRA s'exécutent depuis la même fenêtre, sur votre propre GPU.
Espace de travail Workflows de PixlStash avec des cartes de flux de travail et les modèles, LoRA et paramètres du flux de travail sélectionné

Les flux de travail sont des cartes habillées des images qu'ils ont produites. L'inspecteur liste les modèles, les LoRA, les paramètres et les versions antérieures de chaque flux de travail.

Entraîner un LoRA sans quitter la bibliothèque

L'ajout phare est Entraîner LoRA. Faites un clic droit sur une personne ou sur un ensemble, choisissez le sujet des images et l'intensité de l'entraînement : l'application exécute AI-toolkit sur votre GPU. Le LoRA terminé arrive sur l'étagère des modèles et est rattaché à cette personne, si bien que la génération suivante peut l'appeler sans copier de fichiers dans ComfyUI ni recharger le modèle.

Clusters de ressemblance faciale pour une personne, répartis en groupes selon à qui elle ressemble

Les visages sont regroupés par ressemblance. Conserver le groupe qui correspond réellement à la personne élimine les quasi-ressemblances de l'ensemble d'entraînement.

Deux assistants alimentent cet ensemble d'entraînement :

  • Clusters de ressemblance faciale : ils répartissent les visages d'une personne en groupes selon à qui ils ressemblent, afin que les générations ratées soient écartées avant l'entraînement.
  • Créer un ensemble d'entraînement : il sélectionne la meilleure ressemblance et la meilleure qualité d'image parmi les gros plans, les plans en pied et les expressions, en écartant les quasi-doublons et les autres personnes.

Des planches de personnage pour les personnages sans images

Pour une personne qui a trop peu de références, Générer des planches de personnage les dessine à la place : quatre photos d'identité de face, de trois-quarts et de profil, plus deux plans du corps. Chaque planche indique à quel point elle correspond à la référence dont elle est issue, et chaque photo qu'elle contient fait de même. Les planches que vous conservez deviennent les images de ce personnage ; les autres partent à la corbeille.

Une planche de personnage générée représentant un nain de jardin en céramique

Une planche générée pour un personnage construit à partir d'une seule image. Le flux de travail est sélectionnable, notamment FLUX.2 Klein 9B et Qwen Image Edit 2.1.

Les flux de travail de planches de personnage sont fournis pré-réglés pour Krea 2, MOSS-Image, FLUX.2 Klein 9B et Qwen Image Edit 2.1, et les flux de travail vidéo passent par le même chemin.

Une liaison ComfyUI bidirectionnelle

Le pack de nœuds PixlStash fonctionne dans les deux sens : lancez des flux de travail depuis PixlStash, ou insérez les nœuds loader et saver PixlStash dans votre propre graphique pour que les résultats reviennent étiquetés avec leurs personnes, ensembles et projets.

Nœuds loader et saver PixlStash dans un flux de travail ComfyUI

Le nœud saver enregistre les générations dans la bibliothèque avec le prompt, les modèles, les intensités de LoRA et la graine associés.

Également dans cette version :

  • Trois espaces de travail divisent l'application en Médias, Flux de travail et Modèles, chacun avec sa propre barre latérale.
  • Des modèles présentés comme une étagère sur tous les disques, avec des déplacements de dossiers qui préservent l'index.
  • Plusieurs connexions ComfyUI, pour qu'un ordinateur portable puisse mettre du travail en file d'attente sur une machine de rendu, et que les exécutions qui ne tiennent pas dans la VRAM libre attendent au lieu d'échouer.

Commencer

Installez la version de bureau pour Windows, Linux ou macOS depuis la page des versions, ou exécutez-la sans interface avec l'image Docker ghcr.io/pikselkroken/pixlstash. Une démo de l'interface du serveur est disponible sur demo.pixlstash.dev.

Ouvrez ensuite Paramètres › ComfyUI : l'application détecte un ComfyUI local, y installe ses nœuds et relie les deux. Les nœuds sont aussi disponibles sur le registre ComfyUI sous pixlstash, avec environ 4 500 téléchargements. Tout s'exécute localement sur CUDA, Apple Silicon ou ROCm ; AI-toolkit est nécessaire pour la partie entraînement.

Commentaires

Connectez-vous avec GitHub pour rejoindre la discussion.

Chargement des commentaires…
PixlStash 2.0 : entraîner des LoRA depuis sa bibliothèque d'images | ComfyUI Wiki