Flex.2-preview: Новая модель генерации изображений ИИ с открытым исходным кодом
Flex.2-preview была официально выпущена как модель диффузии текст-в-изображение с открытым исходным кодом, следуя за Flex.1-alpha. Эта модель полностью открыта с исходным кодом, имеет 8 миллиардов параметров и встроенные возможности контроля изображений и инпейнтинга, предоставляя создателям более комплексный опыт генерации изображений.
Ключевые особенности
Flex.2-preview включает следующие ключевые особенности:
- 8 миллиардов параметров: Мощный масштаб параметров обеспечивает высококачественную генерацию изображений
- Guidance embedder: 2x более быстрая скорость генерации
- Встроенный инпейнтинг: Нативная поддержка инпейнтинга
- Универсальный контроль ввода: Поддерживает множественные методы контроля, включая линии, позы и глубину
- Настраиваемая: Поддерживает настраиваемое обучение согласно потребностям пользователей
- Открытая лицензия: Использует лицензию с открытым исходным кодом Apache 2.0
- Поддержка длинного текста: Поддерживает длину ввода 512 токенов
- Создано сообществом и для сообщества: Полностью управляемый сообществом проект
История разработки
Flex.2-preview эволюционировала через несколько важных этапов: от Flux.1 Schnell к OpenFlux.1, затем к Flex.1-alpha, и наконец к текущему Flex.2-preview.
Каждый шаг видел важные улучшения, с Flex.2 как самым большим шагом на данный момент. Этот предварительный выпуск направлен на сбор обратной связи пользователей и поощрение экспериментов сообщества и разработки инструментов.
Использование в ComfyUI
Flex.2 может использоваться в ComfyUI с помощью узла Flex2 Conditioner, найденного в ComfyUI-FlexTools. Также рекомендуется использовать comfyui_controlnet_aux для генерации контрольных изображений (поза и глубина).
Шаги использования:
- Установите необходимые инструменты и узлы
- Скачайте Flex.2-preview.safetensors в ваш каталог моделей ComfyUI
- Перезапустите ComfyUI и начните создавать с рабочим процессом
Пример использования библиотеки Diffusers
В дополнение к ComfyUI, Flex.2 также может использоваться через библиотеку Diffusers. Вот пример:
Ограничения и будущее развитие
Как предварительная версия, Flex.2 все еще находится в активной разработке, с возможностями для улучшения в следующих областях:
- Точность человеческой анатомии
- Качество рендеринга текста
- Улучшение функциональности инпейнтинга
Разработчик указал, что они непрерывно обучают для улучшения этих ограничений.
Тонкая настройка и кастомизация
Flex.2 разработана для возможности тонкой настройки. Пользователи могут использовать AI-Toolkit для обучения LoRA и автоматически генерировать контрольные и инпейнтинг входы для своих собственных наборов данных.
Вы даже можете создать свои собственные методы контроля и научить модель использовать их, обучая простую LoRA, занимая не больше времени, чем обучение обычной LoRA.
Связанные ссылки
Если вы хотите попробовать последнюю технологию генерации изображений, Flex.2-preview предлагает мощную и гибкую опцию с открытым исходным кодом, которая может удовлетворить различные потребности от простого создания до сложного редактирования.