LanPaint 2.0.0 : inpainting vidéo et audio avec MiniMax H3
LanPaint 2.0.0 ajoute le support MiniMax H3 avec un pipeline d'inpainting vidéo et audio : peignez masques et intervalles audio dans un éditeur, puis traitez les deux en une passe.
LanPaint a publié la version 2.0.0 le 9 août, ajoutant un pipeline dédié à l'inpainting vidéo et audio MiniMax H3. LanPaint est l'implémentation ComfyUI du sampler d'inpainting sans entraînement issu de l'article TMLR LanPaint: Training-Free Diffusion Inpainting with Asymptotically Exact and Fast Conditional Sampling, et cette version majeure vous permet de réparer la vidéo H3 et son flux audio associé en une seule passe.
 |  |  |
|---|---|---|
| Entrée masquée (peinte dans l'éditeur) | Incrustation du masque visible | Vidéo et audio après inpainting |
Comment fonctionne le pipeline AV
Le nouveau pipeline peint les masques vidéo et les intervalles audio en une seule session d'éditeur, encode les deux flux dans un seul latent imbriqué, puis exécute une seule passe du sampler :
- LanPaint_VideoMaskEditor : sélectionnez la vidéo, peignez des masques image par image sur les images clés (interpolés par SDF entre celles-ci) et faites glisser les intervalles audio sur la forme d'onde. Masque = 1 régénère, 0 conserve.
- LanPaint_AVEncode : encode les images vidéo et la piste audio dans un seul latent imbriqué avec les masques attachés.
- Sampler : exécutez comme d'habitude ; le flux audio suit sa propre planification de sigmas décalée pour le den
Commentaires
Connectez-vous avec GitHub pour rejoindre la discussion.