P-H3-Image s'exécute en 2 étapes avec un LoRA pDMD dans ComfyUI

ComfyUI Wikinews

Un LoRA pDMD en 2 étapes fait passer P-H3-Image de 8 étapes à 2 en 8 MP : un seul fichier, un flux de travail ComfyUI prêt et aucun nœud personnalisé, environ 2,9 s par image.

<strong>P-H3-Image</strong> échantillonne normalement en 8 étapes. akhaliq a empaqueté le LoRA pDMD 2-NFE dans un seul fichier, ce qui permet de l'exécuter en 2 étapes et en 2912 x 2912 en environ 2,9 s par image sur une H200 ou une RTX PRO 6000. ComfyUI l'exécute avec des nœuds intégrés uniquement, et un flux de travail prêt est fourni avec les poids.
P-H3-Image d'origine à 2 étapesP-H3-Image à 2 étapes avec le LoRA pDMD
Modèle d'origine, 2 étapesAvec le LoRA pDMD, 2 étapes

Douze prompts, 2 étapes, shift 12, graine 3, rendus en 2912 x 2912 depuis le dépôt de l'auteur. Sans le LoRA, le modèle est encore au milieu du débruitage à 2 étapes.

Lancer

  1. Configurez P-H3-Image selon P-H3-Image-Comfy et mettez à jour ComfyUI vers la dernière version master.
  2. Téléchargez le LoRA dans ComfyUI/models/loras/ :
    hf download akhaliq/p-h3-image-pdmd-2step minimax_h3_pdmd_2nfe_comfyui.safetensors --local-dir ComfyUI/models/loras
  3. Ouvrez le flux de travail ci-dessous. Deux changements par rapport au graphique d'origine en 8 étapes : LoraLoaderModelOnly (Contourner, modèle uniquement) à une force de 1.0 entre Charger Modèle Diffusion et l'échantillonneur, et un PlanificateurBasique sur simple à 2 étapes avec un flow shift de 12 à la place de la grille Sigmas manuels en 8 étapes. Conservez euler, le GuideBasique et aucun CFG.

Il existe également une démo dans le navigateur pour la génération texte-image et l'édition d'une seule image à 2, 3 et 4 étapes.

2, 3 ou 4 étapes

ÉtapesRésultat
2Utilisable : net et cohérent, mais la composition dérive par rapport à la référence en 8 étapes et les prompts graphiques peuvent inventer du pseudo-texte
3Le réglage intermédiaire sûr
4Le plus proche de la référence, et le choix pour le texte entre guillemets et les graphiques plats

Le LoRA est l'adaptateur pDMD 2-NFE (rank 128, alpha 128 sur les mêmes 312 modules, bf16, non modifié par rapport à la version amont). Il a été distillé pour le modèle vidéo H3, et ici il est fusionné dans le transformeur d'image de P-H3-Image à la place.

Passe de détail facultative

Un refiner Regenerate-2K par-dessus ajoute du détail réel : rendez un brouillon de 2 MP en 2 étapes, agrandissez 2x, puis régénérez en 8 MP avec le LoRA refiner à sigma 0.7 pendant 3 étapes Euler. L'auteur mesure environ 7 s par image au total, soit à peu près 1,7x plus rapide que la référence en 8 étapes seule. Utilisez 0.5 pour les portraits, ce qui préserve mieux les visages tout en donnant moins de détail.

Brouillon en 2 étapes affiné à sigma 0.7

Brouillon en 2 étapes plus la passe Regenerate-2K à sigma 0.7, mêmes douze prompts.

La VRAM ne change pas : le LoRA est fusionné au chargement, donc l'ensemble bf16 nécessite toujours environ 83 Go sans l'upsampler de prompt, ou environ 76 Go avec l'offload des composants de ComfyUI.

Disponibilité

Commentaires

Connectez-vous avec GitHub pour rejoindre la discussion.

Chargement des commentaires…
P-H3-Image s'exécute en 2 étapes avec un LoRA pDMD dans ComfyUI | ComfyUI Wiki