Descripción
El nodo Cargador Avanzado de LoRA LTX2 proporciona control de fuerza por bloque para aplicar LoRAs a modelos de difusión de vídeo LTX2. A diferencia de un cargador de LoRA estándar, este nodo le permite ajustar de forma independiente la influencia del LoRA en diferentes tipos de capas de atención dentro del modelo: vídeo, atención cruzada de vídeo a audio, audio, atención cruzada de audio a vídeo, y todas las demás capas no cubiertas por esos filtros. Esto le ofrece un control detallado sobre cómo el LoRA modifica el comportamiento del modelo entre modalidades.
Entradas
| Entrada | Tipo | Requerido | Predeterminado | Mín | Máx | Paso | Descripción |
|---|---|---|---|---|---|---|---|
lora_name | COMBO | Sí | — | — | — | — | El nombre del LoRA (seleccione de los LoRA disponibles o escriba un nombre). |
model | MODEL | Sí | — | — | — | — | El modelo de difusión al que se aplicará el LoRA. |
strength_model | FLOAT | Sí | 1.0 | -100.0 | 100.0 | 0.01 | Con qué intensidad modificar el modelo de difusión. Este valor puede ser negativo (invierte el efecto). |
opt_lora_path | STRING | No | (vacío) | — | — | — | Ruta absoluta del archivo LoRA. Si se proporciona, anula la búsqueda del lora_name seleccionado. |
video | FLOAT | Sí | 1.0 | 0.0 | 1.0 | 0.01 | Fuerza para las capas de atención de vídeo. |
video_to_audio | FLOAT | Sí | 1.0 | 0.0 | 1.0 | 0.01 | Fuerza para las capas de atención cruzada de vídeo a audio. |
audio | FLOAT | Sí | 1.0 | 0.0 | 1.0 | 0.01 | Fuerza para las capas de atención de audio. |
audio_to_video | FLOAT | Sí | 1.0 | 0.0 | 1.0 | 0.01 | Fuerza para las capas de atención cruzada de audio a vídeo. |
other | FLOAT | Sí | 1.0 | 0.0 | 1.0 | 0.01 | Fuerza para las capas no cubiertas por los otros filtros de capa (por ejemplo, componentes compartidos o residuales). |
Salidas
| Salida | Tipo | Descripción |
|---|---|---|
model | MODEL | El modelo de difusión con el LoRA aplicado, modulado por las intensidades por bloque. |
lora_name | STRING | El nombre del LoRA cargado (útil para registrar o pasar a otros nodos). |
lora_path | STRING | La ruta absoluta del archivo LoRA cargado (o una cadena vacía si solo se usó un nombre). |
Notas de uso
- El parámetro
strength_modelcontrola la influencia general del LoRA sobre el modelo. Los parámetros de intensidad por bloque (video,video_to_audio, etc.) se multiplican contra esta intensidad general para sus respectivos bloques. Por ejemplo, sistrength_model = 1.5yvideo = 0.5, la intensidad efectiva en las capas de atención de vídeo es1.5 × 0.5 = 0.75. - Una intensidad por bloque de
0desactiva completamente el efecto del LoRA en ese tipo de bloque, mientras que un valor de1.0aplica el efecto completo (escalado) del LoRA. - El
strength_modelgeneral puede ser negativo, lo que invierte la dirección de la modificación del LoRA. Las intensidades por bloque deben mantenerse en[0.0, 1.0]; la interfaz no admite valores por bloque negativos. - La entrada
opt_lora_pathpermite cargar un LoRA desde una ruta de archivo específica, evitando la selección por nombre. Si se proporcionan tantolora_namecomoopt_lora_path, la ruta tiene prioridad. - Este nodo está diseñado específicamente para modelos LTX2. Usarlo con otras arquitecturas de modelo puede producir resultados inesperados.
Comentarios
Inicia sesión con GitHub para unirte a la conversación.