FLUX 3 Image Klein: открытые веса 5.6B от BFL для ComfyUI

ComfyUI Wikinews

Black Forest Labs выпустила FLUX 3 Image Klein: открытые веса на 5.6B для генерации по тексту, редактирования и нескольких референсов, с поддержкой ComfyUI в день релиза.

FLUX 3 Image Klein : первая модель с открытыми весами в семействе FLUX 3 от Black Forest Labs (блог | страница модели | веса), выпущенная 15 октября. Это генератор изображений на 5.6B параметров, который справляется с генерацией текст-в-изображение, редактированием изображений и мультиреференсной генерацией с использованием до 10 референсных изображений, а поддержка ComfyUI была добавлена в тот же день.

FLUX 3 Image Klein

Спящая лиса в винтажном чемодане, сгенерировано FLUX 3 Image Klein. Пример от Black Forest Labs.

Релиз включает два чекпойнта: базовую модель, созданную для файнтюнинга, и дистиллированную по шагам модель для генерации с низкой задержкой. BFL опубликовала сборки FP8, INT8 и NVFP4, сделанные при поддержке NVIDIA. VAE здесь существующий FLUX.2 VAE, а текстовый энкодер это Qwen3-VL-4B, так что со стороны модели ничего не отличается от того, что ComfyUI уже загружает.

Что умеет FLUX 3 Image Klein

FLUX 3 Image Klein разделяет основные возможности с полной моделью FLUX 3 Image:

  • Нативная генерация 4K и несколько соотношений сторон.
  • Попиксельное редактирование, при котором неотредактированные области сохраняются, а не рендерятся заново.
  • Bounding boxes, задающие, куда поместить элемент, или ограничивающие правку определённой областью. Рамки задаются относительно холста, поэтому результат сохраняет то же соотношение сторон, что и макет.
  • Мультиреференсная генерация с использованием до 10 референсных изображений, на которые в промпте ссылаются как "image 1", "image 2" и так далее.
  • Апсемплер промпта (отдельные веса), который переписывает короткий промпт перед генерацией.
Рендеринг текста в FLUX 3 Image Klein

Марка со смешанным латинским и японским текстом, один из примеров рендеринга текста моделью. Пример от Black Forest Labs.

Инфографика FLUX 3 Image Klein

Инфографика из пяти шагов, сгенерированная по текстовому промпту, проверяет макет и мелкий текст. Пример от Black Forest Labs.

Поддержка ComfyUI в день релиза

Comfy-Org/ComfyUI PR #17064 (CORE-388, автор Kijai) был смёржен 15 октября и добавляет в ядро DiT для Flux 3 Image, настройку его текстового энкодера Qwen3-VL-4B и узел layout prompt. Поддержка появилась после последнего релизного тега, поэтому существующей установке нужно обновиться до актуальной сборки ComfyUI.

Четыре официальных шаблона уже есть в comfyui-workflow-templates, два для базового чекпойнта и два для дистиллированного:

BFL также опубликовала собственный пакет для ComfyUI, black-forest-labs/flux-3-image-klein-comfy, в привычном формате с разбивкой на файлы. Шаблоны ссылаются на сборки INT8 из него:

ПапкаФайлы
diffusion_modelsflux3_image_klein_int8_convrot (5.8 GB) · flux3_image_klein_nvfp4 (5.3 GB) · flux3_image_klein_bf16 (11.1 GB), плюс дистиллированные по шагам сборки _sd_ тех же трёх размеров
text_encodersqwen3vl_4b_int8_convrot (4.9 GB) · qwen3vl_4b_bf16 (8.9 GB) · qwen3.5_9b_flux3_prompt_upsampler_int8_convrot (9.7 GB)
vaeflux2-vae.safetensors (336 MB)
Апсемплер промпта необязателен и нужен только для промптов, которые вы хотите, чтобы модель развернула. Начните с дистиллированного чекпойнта: он того же размера, что и базовая модель, но работает за долю шагов.

Скорость и размер

BFL позиционирует FLUX 3 Image Klein как самую маленькую модель на своей сравнительной диаграмме: 5.6B параметров против 7B у Qwen-Image 2.1 и 12.9B у Krea 2. Веса генератора занимают 11.2 GB в BF16 и 5.6 GB в FP8, а сборка INT8 работает на видеокартах NVIDIA GeForce с объёмом VRAM всего от 8 GB через ComfyUI. С дистиллированным чекпойнтом и сборкой INT8 BFL сообщает примерно 4 секунды для изображения 1 MP на RTX 5090 и менее 9 секунд на RTX 4070, оба замера сделаны в ComfyUI.

Дистиллированная, 16 шаговБазовая, 50 шагов
Дистиллированная по шагам модель, 16 шаговБазовая модель, 50 шагов
Время генерации по GPU, измерено NVIDIA. Источник: Black Forest Labs

Во внутренних оценках BFL FLUX 3 Image Klein прибавляет 91 Elo в текст-в-изображение и 70 в редактировании изображений относительно FLUX.2 [klein] 9B, используя при этом на 38% меньше параметров, а компания сообщает, что модель занимает первое место в её собственных сравнениях по text-to-image, мультиреференсу и редактированию, опережая более крупные модели с открытыми весами, а также Ideogram V4.5 и FLUX.2 [pro]. Эти цифры это вендорские бенчмарки, так что относитесь к ним как к отправной точке, а не как к вердикту.

Пример FLUX 3 Image Klein

Снежный барс на скальном выступе, сгенерировано по текстовому промпту. Пример от Black Forest Labs.

Редактирование и референсные изображения

Именно на точечных правках модель должна оправдать своё место: одно и то же изображение можно изменить, а всё вокруг изменения остаётся на месте.

ДОПОСЛЕ
Оригинальное фото"Turn this summer street into winter after light snowfall."
ДОПОСЛЕ
Оригинальное фото"Freeze the waterfall into blue-white ice and long icicles."
Пример стиля FLUX 3 Image Klein

Астронавт в стиле пластилиновой анимации, сгенерировано по тексту. Пример от Black Forest Labs.

Доступность

  • Веса: дистиллированная и базовая модели на Hugging Face, плюс пакет для ComfyUI и апсемплер промпта. Репозитории на Hugging Face закрыты, поэтому перед загрузкой примите условия на странице модели.
  • ComfyUI: поддержка в ядре добавлена в PR #17064; используйте четыре шаблона выше или собственную папку workflows/ в пакете для ComfyUI от BFL.
  • Доступно в день релиза вне ComfyUI: Hugging Face Diffusers, TensorRT-LLM, SGLang Diffusion и vLLM-Omni, с обучением LoRA через AI Toolkit от Ostris и рецептами в NVIDIA NeMo AutoModel.
  • API: дистиллированная модель доступна как flux-3-image-klein с апсемплингом промпта и восстановлением пикселей, что сохраняет неотредактированные области изображения точно такими, какими они были.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…
FLUX 3 Image Klein: открытые веса 5.6B от BFL для ComfyUI | ComfyUI Wiki