Quants GGUF Unsloth MiniMax H3: rango Q2-Q8 para uso local

ComfyUI Wikinews

Unsloth publica cuantizaciones GGUF de MiniMax H3 de Q2_K (6,3 GB) a Q8_0 (20 GB) para FL2VA y Ref2VA, más GGUF del codificador Qwen3-VL para ComfyUI y stablediffusion.cpp.

Unsloth publicó cuantizaciones GGUF de MiniMax H3 el 10 de agosto, cubriendo el rango Q2:Q8 completo para ambos denoisers de H3, además del codificador de texto Qwen3-VL que necesitan. Los archivos son compatibles con ComfyUI, stablediffusion.cpp y Unsloth, lo que ofrece a los usuarios con poca VRAM una escalera de opciones mucho más amplia que la primera ola de cuantizaciones de la comunidad.

Clip de demostración de MiniMax H3 GGUF generado con UD-Q2_K_XL

Clip de demostración generado con el peldaño más pequeño, UD-Q2_K_XL: 960x544, 124 fotogramas, 24 FPS, 8 pasos, orientación 1.0 (GIF con resolución reducida y sin audio; el MP4 completo incluye el audio estéreo nativo de 32 kHz de H3)

Lo que se publicó

H3 viene con dos denoisers, y ambos están cuantizados en los mismos peldaños:

QuantFL2VA podadoRef2VA podado
Q2_K6,26 GiB6,22 GiB
UD-Q2_K_XL7,51 GiB
Q3_K8,16 GiB8,12 GiB
UD-Q3_K_XL8,90 GiB
Q4_K10,64 GiB10,60 GiB
Q5_012,97 GiB12,93 GiB
Q6_K15,45 GiB15,42 GiB
Q8_019,96 GiB19,94 GiB

FL2VA es la variante de primer y último fotograma (texto más cero, uno o dos fotogramas); Ref2VA es la variante de referencia (texto más imágenes de referencia, vídeos y audio). Son checkpoints separados, así que elige el que se ajuste a la tarea.

El codificador de texto Qwen3-VL 32B que H3 necesita también está disponible como GGUF: qwen3vl_32b_minimax_h3-Q2_K_M.gguf (12,20 GiB) y qwen3vl_32b_minimax_h3-Q4_K_M.gguf (16,97 GiB).

Qué archivo se ajusta a tu GPU

VRAMPeldaño recomendado
8–12 GBQ2_K o UD-Q2_K_XL
12–16 GBQ3_K / UD-Q3_K_XL o Q4_K
16–24 GBQ5_0 o Q6_K
24 GB+Q8_0

Como referencia, la demo anterior se ejecutó en una sola tarjeta a 960x544 con el peldaño UD-Q2_K_XL.

Cómo usarlo en ComfyUI

Los GGUF del modelo de difusión se cargan mediante los nodos de carga GGUF estándar de ComfyUI (ComfyUI-GGUF), igual que las anteriores cuantizaciones de H3 de la comunidad, y el GGUF del codificador de texto se carga mediante el cargador de codificador de texto GGUF. Como de costumbre, usa el archivo junto con los VAE de vídeo y audio de MiniMax H3.

Disponibilidad

Todos los archivos están en Hugging Face en unsloth/MiniMax-H3-GGUF. Además de en ComfyUI, los mismos archivos funcionan con stablediffusion.cpp y el runtime propio de Unsloth.

Comentarios

Inicia sesión con GitHub para unirte a la conversación.

Cargando comentarios…
Quants GGUF Unsloth MiniMax H3: rango Q2-Q8 para uso local | ComfyUI Wiki