Lightricks publie le LoRA officiel LTX-2.3 Foley V2A pour les effets sonores

Lightricks a publié un LoRA Foley V2A LTX-2.3 officiel (HuggingFace) qui génère des effets sonores réalistes et synchronisés visuellement pour les vidéos générées par LTX-2.3 : pas, coups de marteau, clics de frappe, bruits de moteur, etc., sans musique de fond.

Présentation

Le LTX-2.3-22b-LoRA-Foley-V2A est un adaptateur LoRA officiel de Lightricks pour leur modèle de base audio-vidéo LTX-2.3. Alors que LTX-2.3 génère nativement des vidéos avec audio, il produit souvent de la musique de fond ou des bandes sonores rythmiques. Ce LoRA Foley redirige le modèle vers la génération d'effets sonores réalistes qui correspondent précisément à l'action à l'écran.

Nommé d'après la technique cinématographique traditionnelle d'enregistrement d'effets sonores personnalisés en synchronisation avec l'action visuelle, le modèle excelle dans la production d'audio diégétique : des sons qui appartiennent à la scène plutôt qu'à une partition musicale.

Forgeron martelant : sons métalliques réalistes avec ambiance de forge (exemple du référentiel du modèle)

Exemples de sons

Le modèle est livré avec six vidéos de démonstration illustrant sa gamme :

Scène	Description sonore
Forgeron martelant	Clangs métalliques lourds, crachats d'étincelles, ambiance de forge
Frappe au clavier d'ordinateur portable	Clics légers rapides, touches étouffées, contact avec le repose-poignet en aluminium
Entraînement au focus pad	Claquements rembourrés, bruits sourds de cuir, pivots de pied sur sol de salle de sport
Pas sur une promenade en bois	Bruits de pas en bois creux, craquements de planches, frottements de semelles
Marche dans la neige mouillée	Compression de neige, bruits de gadoue, craquements de croûte de glace
Motos sur route de montagne	Bruits de moteur, sifflement de pneus, bruit du vent

Utilisation du modèle

Le LoRA est disponible sur HuggingFace en tant que modèle à accès restreint (nécessite d'accepter la Licence Communauté LTX-2). Le fichier de checkpoint est :

ltx-2.3-22b-lora-foley-v2a-1.0.safetensors

Il se charge par-dessus le modèle de base standard LTX-2.3 22B. Pour les utilisateurs de ComfyUI, le LoRA peut être chargé via les nœuds d'encapsulation officiels de Lightricks ComfyUI-LTXVideo, qui prennent en charge les adaptateurs LoRA pour le pipeline LTX.

Pour utiliser le LoRA Foley, acceptez d'abord la licence sur la page HuggingFace, puis téléchargez avec la CLI HF : ```bash hf download Lightricks/LTX-2.3-22b-LoRA-Foley-V2A --local-dir ComfyUI/models/loras ```

Version officielle vs communautaire

Cette version fait suite à un LoRA Foley LTX-2.3 communautaire créé par FuzzPuppy fin juin. La version officielle de Lightricks est construite directement par l'équipe LTX, utilisant la même architecture que les autres LoRA LTX 22B, et est assortie d'une licence à accès restreint liée à la Licence Communauté LTX-2.

Liens

Modèle : Lightricks/LTX-2.3-22b-LoRA-Foley-V2A sur HuggingFace
Modèle de base : Lightricks/LTX-2.3
Dépôt LTX-2 : github.com/Lightricks/LTX-2
Encapsulation ComfyUI : Lightricks/ComfyUI-LTXVideo