LTX-2.3 Foley LoRA : Effets sonores réalistes de la vidéo à l'audio pour le modèle vidéo de Lightricks
FuzzPuppy publie LTX-2.3 Foley LoRA, un adaptateur LoRA vidéo-à-audio qui ajoute des effets sonores réalistes et synchronisés visuellement aux vidéos générées par LTX-2.3 sans superposition de musique de fond.
Aperçu
LTX-2.3 Foley est un adaptateur LoRA vidéo-à-audio pour le modèle de génération vidéo LTX-2.3 de Lightricks. Alors que LTX-2.3 génère nativement des vidéos avec un accompagnement audio, il produit souvent par défaut de la musique de fond ou une bande sonore rythmique. Le LoRA Foley redirige le modèle vers la production d'effets sonores réalistes qui correspondent au contenu visuel : pas de pas, portes qui se ferment, sons de cuisine, impacts sportifs, etc.
Le nom « Foley » vient de la technique cinématographique qui consiste à enregistrer des effets sonores personnalisés en synchronisation avec l'action à l'écran.
Fonctionnement
Le LoRA est appliqué par-dessus les capacités vidéo-à-audio du LTX-2.3. Les utilisateurs contrôlent la sortie via :
- Multiplicateur LoRA : Plage recommandée de 1 à 3 (les valeurs plus élevées suppriment la musique plus agressivement)
- Invites descriptives : Décrivez l'action visible, suivie de « No speech is present. No music is present. »
- Invites négatives : Exclure la musique, la mélodie, le chant et les éléments de bande sonore
Exemple d'invite :
A barista uses an espresso machine to steam milk. No speech is present. No music is present.Compatibilité
Le LoRA Foley est conçu pour les modèles vidéo-à-audio de base ou distillés de LTX-2.3. Il est disponible sous la forme d'un fichier .safetensors unique (ltx-2.3-foley-400-steps.safetensors, 400 étapes d'entraînement) et peut être chargé via les workflows standard de chargement LoRA dans ComfyUI ou diffusers.
Disponibilité
Les poids du LoRA sont publiés sous la LTX Community License Agreement sur HuggingFace :
- Modèle : FuzzPuppy/LTX-2.3-Foley-LoRA
- Tutoriel : Guide YouTube
- Modèle de base : Lightricks/LTX-2.3