Как установить и использовать модели LoRA в ComfyUI?
Принцип моделей LoRA
Представьте, что у вас есть универсальный робот-повар, который может готовить различные базовые блюда. Однако, если вы хотите, чтобы этот робот-повар создавал некоторые специальные блюда с специфическими вкусами, такие как итальянская пицца или китайские пельмени, вам нужно предоставить ему некоторые дополнительные “рецепты.”
- Stable Diffusion Stable Diffusion похож на этого универсального робота-повара, способного создавать различные блюда (изображения) на основе разных ингредиентов (описаний). Он преуспевает в понимании ваших запросов и создании вкусных блюд, соответствующих вашим описаниям.
- Модели LoRA Модели LoRA похожи на дополнительные “рецепты”, предоставленные этому роботу-повару. Эти “рецепты” помогают роботу-повару научиться готовить некоторые специальные блюда, обогащая его кулинарные навыки.
Принцип
- Базовая способность: Робот-повар (Stable Diffusion) уже знает, как готовить различные базовые блюда.
- Специальные рецепты: LoRA - это те специальные “рецепты”, которые учат повара готовить блюда с специфическими вкусами.
- Процесс обучения: Изучая эти “рецепты”, робот-повар может постепенно освоить навыки приготовления этих специальных блюд.
Функция
- Персонализация: Используя LoRA, робот-повар может создавать более персонализированные блюда для удовлетворения ваших специфических вкусовых потребностей.
- Гибкость: Даже после изучения новых “рецептов” робот-повар все еще может готовить любые другие блюда, становясь более универсальным.
- Эффективность: LoRA позволяет роботу-повару изучать новые “рецепты”, не забывая свои оригинальные кулинарные навыки, позволяя ему быстро готовить блюда, которые вы хотите.
Модели LoRA в Stable Diffusion похожи на набор специальных “рецептов”, предоставленных роботу-повару, позволяя ему создавать блюда, которые вы хотите, более гибко и персонализированно, сохраняя при этом свои оригинальные кулинарные способности.
Где скачать модели LoRA?
Большинство сообществ ИИ-рисования предлагают скачивания моделей. Вы можете быстро найти этот тип модели, отфильтровав по LoRA на соответствующих сайтах.
- civitai: https://civitai.com
- liblib (Китай): https://www.liblib.art/
Как показано на изображении ниже, выберите LoRA при фильтрации моделей на civitai, чтобы отфильтровать модели LoRA.
Как установить модели LoRA в ComfyUI?
Поместите скачанные модели в директорию “ComfyUI\models\loras”, затем перезапустите или обновите интерфейс ComfyUI для загрузки соответствующих моделей LoRA.
Поскольку модели нужно версионировать, для вашего удобства я предлагаю переименовать файлы моделей с префиксом версии, как “SD1.5-НазваниеМодели,” или без переименования создать новую папку в соответствующей директории моделей, названную по большой версии модели, как “SD1.5,” а затем скопировать ваши файлы моделей в “ComfyUI\models\loras\SD1.5.”
Если вы делитесь файлами моделей с другими GUI, пожалуйста, обратитесь к разделу общих моделей в Как связать модели Stable Diffusion между ComfyUI и другими WebUI и скопируйте соответствующие файлы моделей в соответствующую папку.
Как использовать модели LoRA в ComfyUI?
Пожалуйста, обратитесь к примерам в ссылках ниже для использования моделей LoRA.
Рекомендуемые модели LoRA
Я обновил некоторые рекомендации LoRA на странице ниже, которые вы можете скачать в соответствии с вашими потребностями.