ByteDance выпускает InfiniteYou: гибкое пересоздание фотографий с сохранением личности пользователя

Команда интеллектуального творчества ByteDance недавно выпустила InfiniteYou (InfU), новую платформу генерации изображений, которая может гибко генерировать разнообразные, высококачественные изображения на основе текстовых подсказок, сохраняя при этом личность пользователя.

Технический прорыв

Достижение гибкой и высококачественной генерации изображений при сохранении личной идентичности остается сложной задачей. InfiniteYou - это инновационная платформа на основе продвинутых Diffusion Transformers (DiTs), особенно модели FLUX, разработанная для решения ограничений существующих методов в отношении сходства личности, выравнивания текст-изображение и качества генерации.

Основные преимущества

InfiniteYou демонстрирует несколько преимуществ по сравнению с существующими методами генерации изображений с сохранением личности:

• Высокое сходство личности: Компонент InfuseNet напрямую внедряет особенности личности через остаточные соединения, обеспечивая точное сохранение личности пользователя
• Превосходное выравнивание текст-изображение: Многоэтапная стратегия обучения значительно улучшает выравнивание между сгенерированными изображениями и текстовыми описаниями
• Высокое качество генерации и эстетика: Сгенерированные изображения превосходят существующие базовые модели с точки зрения деталей, ясности и эстетической привлекательности
• Уменьшает копирование-вставку лиц: Лучше генерирует реалистичные черты лица на основе текстовых подсказок, уменьшая явления прямого копирования-вставки лиц
• Свойство plug-and-play: Имеет идеальный дизайн plug-and-play, совместимый с различными существующими методами и инструментами

Практические применения

Технология InfiniteYou может применяться в различных творческих сценариях:

• Создание персонализированных аватаров
• Разнообразное представление для создателей контента
• Виртуальная примерка и трансформация изображений
• Создание персонализированной рекламы и маркетингового контента

Открытый исходный код и доступность

ByteDance открыл исходный код и модели InfiniteYou на GitHub. Разработчики и исследователи могут использовать его код под лицензией Apache 2.0, в то время как модели доступны под лицензией Creative Commons Attribution-NonCommercial 4.0 International Public License только для целей академических исследований.

Связанные ссылки

• Репозиторий GitHub: https://github.com/bytedance/InfiniteYou
• Модель Hugging Face: https://huggingface.co/ByteDance/InfiniteYou
• Онлайн демонстрация Hugging Face: https://huggingface.co/spaces/ByteDance/InfiniteYou-FLUX