MiniMax H3 Turbo Ref2V v0.1: LoRA de referencia a vídeo en 4 pasos

ComfyUI Wikinews

Lightx2v y ModelTC lanzan MiniMax H3 Turbo Ref2V v0.1, un LoRA de referencia a vídeo en 4 pasos con pesos bf16 listos para ComfyUI y generación multi-referencia.

El 13 de agosto, el equipo de Lightx2v y ModelTC lanzaron Ref2V Turbo v0.1, la contraparte de referencia a vídeo de su línea de LoRA MiniMax H3 Turbo. Tras el lanzamiento de FL2V Turbo v1.0 el 11 de agosto, el nuevo checkpoint incorpora la misma destilación de 4 pasos a Ref2VA (referencia a vídeo + audio), permitiendo que un vídeo sea guiado por una o más imágenes de referencia en lugar de un único primer fotograma.

Referencia de personaje de los recursos de prueba Ref2V de Lightx2v

Referencia de personaje de los recursos de prueba Ref2V de Lightx2v

Qué incluye v0.1

ModeloTareasResolución de entrenamientoDesplazamientos de entrenamiento (vídeo / audio)Pasos de destilación (NFE)Pasos de inferencia recomendados
Ref2VA Turbo 4 pasos v0.1Ref2VA544p (AR mixta)12 / 344

El lanzamiento de v0.1 consta de dos archivos en Hugging Face:

  • minimax_h3_ref2v_turbo_4step_v0.1_bf16.safetensors para Diffusers
  • minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensors listo para colocar directamente en ComfyUI, sin necesidad de conversión

Para la política de redimensionado de la imagen de referencia, el proyecto recomienda el modo match utilizado durante el entrenamiento de destilación, que ajusta el área de píxeles de la referencia al lienzo de destino conservando su relación de aspecto y sin ampliar nunca una referencia más pequeña. Las tres políticas compatibles mantienen la relación de aspecto de la referencia y utilizan la cuadrícula de resolución H3 (dimensiones redondeadas a múltiplos de 32) sin recortar el contenido de la referencia.

Uso en ComfyUI

MiniMax H3 tiene soporte nativo de ComfyUI, por lo que no se requiere ningún nodo personalizado para el LoRA:

  1. Descarga minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensors en ComfyUI/models/loras/.
  2. Carga el checkpoint base MiniMax H3 en un flujo de trabajo Ref2V y aplica el LoRA entre el cargador de modelos y el muestreador.
  3. Conecta una o más imágenes de referencia a través de la rama de entrada de referencia y ejecuta 4 pasos de muestreo.

La plantilla oficial de flujo de trabajo R2V de MiniMax H3 es un buen punto de partida. El proyecto también incluye un gráfico de ejemplo dedicado, video_minimax_h3_ref2v_lightx2v_turbo.json, que usa por defecto el checkpoint Ref2VA Turbo de 4 pasos v0.1 a 960x544 (16:9, 0.5 MP).

Disponibilidad

Comentarios

Inicia sesión con GitHub para unirte a la conversación.

Cargando comentarios…
MiniMax H3 Turbo Ref2V v0.1: LoRA de referencia a vídeo en 4 pasos | ComfyUI Wiki