Lightricks Releases Official LTX-2.3 Foley V2A LoRA for Sound Effects

news

Lightricks releases an official LTX-2.3 Foley V2A LoRA for realistic, visually synchronized sound effects — footsteps, impacts, typing, and environmental audio.

Lightricks выпустил официальную LTX-2.3 Foley V2A LoRA (HuggingFace), которая генерирует реалистичные, визуально синхронизированные звуковые эффекты для видео, созданных с помощью LTX-2.3: шаги, удары молотка, щелчки клавиатуры, рев двигателя и многое другое — без фоновой музыки.

Обзор

LTX-2.3-22b-LoRA-Foley-V2A — это официальный LoRA-адаптер от Lightricks для их аудио-видео фундаментальной модели LTX-2.3. В то время как LTX-2.3 изначально генерирует видео с сопутствующим аудио, часто это фоновая музыка или ритмические саундтреки. Данная Foley LoRA перенаправляет модель на генерацию реалистичных звуковых эффектов, которые точно соответствуют происходящему на экране.

Названная в честь традиционной кинематографической техники записи пользовательских звуковых эффектов в синхронизации с визуальным действием, модель отлично справляется с созданием диегетического аудио — звуков, которые принадлежат сцене, а не музыкальному сопровождению.

Кузнец бьет молотом — реалистичные металлические лязги с атмосферой кузницы (пример из репозитория модели)

Примеры звуков

Модель поставляется с шестью демонстрационными видео, показывающими её возможности:

СценаОписание звука
Удары молота кузнецаТяжелые металлические лязги, шипение искр, атмосфера кузницы
Печать на клавиатуре ноутбукаБыстрые легкие щелчки, приглушенные удары по клавишам, контакт с алюминиевым подлокотником
Тренировка на фокус-падеПриглушенные шлепки, глухие удары кожи, повороты стопы на полу спортзала
Шаги по дощатой набережнойПолые деревянные шаги, скрип досок, шарканье подошв
Ходьба по мокрому снегуСжатие снега, хлюпанье слякоти, хруст ледяной корки
Мотоциклы на горной дорогеРев двигателей, шипение шин, шум ветра

Использование модели

LoRA доступна на HuggingFace как модель с ограниченным доступом (требуется принятие LTX-2 Community License). Файл чекпоинта:

ltx-2.3-22b-lora-foley-v2a-1.0.safetensors

Она загружается поверх стандартной базовой модели LTX-2.3 22B. Для пользователей ComfyUI LoRA можно загрузить через официальные узлы-обертки Lightricks ComfyUI-LTXVideo, которые поддерживают LoRA-адаптеры для пайплайна LTX.

Чтобы использовать Foley LoRA, сначала примите лицензию на странице HuggingFace, затем загрузите с помощью HF CLI: ```bash hf download Lightricks/LTX-2.3-22b-LoRA-Foley-V2A --local-dir ComfyUI/models/loras ```

Официальная версия и версия сообщества

Данный релиз следует за созданной сообществом LTX-2.3 Foley LoRA от FuzzPuppy, выпущенной в конце июня. Официальная версия Lightricks создана непосредственно командой LTX, использует ту же архитектуру, что и другие LTX 22B LoRA, и поставляется с ограниченной лицензией, привязанной к LTX-2 Community License.

Ссылки

Lightricks Releases Official LTX-2.3 Foley V2A LoRA for Sound Effects | ComfyUI Wiki