Lightricks, 공식 LTX-2.3 Foley V2A LoRA 출시: 사실적인 사운드 효과 생성
Lightricks에서 공식 LTX-2.3 Foley V2A LoRA를 출시했습니다. 발소리, 충격음, 타이핑, 환경 소리 등 현실적이고 시각과 동기화된 사운드 효과를 생성합니다.
개요
LTX-2.3-22b-LoRA-Foley-V2A는 Lightricks이 자사의 LTX-2.3 오디오-비디오 기초 모델을 위해 만든 공식 LoRA 어댑터입니다. LTX-2.3은 기본적으로 오디오가 포함된 비디오를 생성하지만, 종종 배경 음악이나 리드미컬한 사운드트랙을 생성합니다. 이 Foley LoRA는 모델이 실제 세계의 사운드 효과를 생성하도록 방향을 바꾸어 화면의 동작과 정확하게 일치시킵니다.
전통적인 영화 제작 기법인 시각적 동작에 맞춰 맞춤형 사운드 효과를 녹음하는 방식에서 이름을 따온 이 모델은 음악적 점수가 아닌 장면에 속하는 다이제틱 사운드(장면 내에서 들리는 소리)를 생성하는 데 탁월합니다.
대장간 망치질 — 사실적인 금속성 쇳소리와 대장간 분위기 (모델 저장소 예시)
예시 사운드
이 모델은 여섯 가지 데모 비디오와 함께 제공되며 그 범위를 보여줍니다.
| 장면 | 사운드 설명 |
|---|---|
| 대장간 망치질 | 무거운 금속성 쇳소리, 불꽃 튀는 소리, 대장간 분위기 |
| 노트북 키보드 타이핑 | 빠르고 가벼운 클릭 소리, 뮤트된 키 탭, 알루미늄 손목 받침대 접촉음 |
| 포커스 패드 훈련 | 패딩 타격음, 가죽 둔탁음, 체육관 바닥에서의 발 회전음 |
| 산책로 발소리 | 텅 빈 나무 발걸음, 판자 삐걱임, 신발 밑 창 끌림 |
| 젖은 눈 위 걷기 | 눈 압축음, 진창 소리, 얼음 껍질 부서짐 |
| 산길 오토바이 | 엔진 소음, 타이어 바람 소리, 돌풍 |
모델 사용 방법
이 LoRA는 HuggingFace에서 게이트 모델로 제공되며, LTX-2 커뮤니티 라이선스 수락이 필요합니다. 체크포인트 파일은 다음과 같습니다.
ltx-2.3-22b-lora-foley-v2a-1.0.safetensors표준 LTX-2.3 22B 베이스 모델 위에 로드됩니다. ComfyUI 사용자의 경우 Lightricks 공식 ComfyUI-LTXVideo 래퍼 노드를 통해 LoRA를 로드할 수 있으며, 이 노드는 LTX 파이프라인의 LoRA 어댑터를 지원합니다.
공식 버전 vs 커뮤니티 버전
이번 출시는 6월 말 FuzzPuppy가 만든 커뮤니티 제작 LTX-2.3 Foley LoRA에 이어 나온 것입니다. Lightricks의 공식 버전은 다른 LTX 22B LoRA와 동일한 아키텍처를 사용하여 LTX 팀이 직접 제작했으며, LTX-2 커뮤니티 라이선스와 연결된 게이트 라이선스가 적용됩니다.
링크
- 모델: HuggingFace의 Lightricks/LTX-2.3-22b-LoRA-Foley-V2A
- 베이스 모델: Lightricks/LTX-2.3
- LTX-2 저장소: github.com/Lightricks/LTX-2
- ComfyUI 래퍼: Lightricks/ComfyUI-LTXVideo