Найти тему
Ветер в нейросети

Модели LORA для генерации изображений в нейросети FLUX

Оглавление

Возможности нейросети FLUX впечатляют. Ключевой задачей встал вопрос о том, как работать с недостатками этой нейронки. Для этого нам потребуются модели LORA. Они тонко настраивают алгоритмы искусственного интеллекта для работы с конкретными стилями или объектами. Простыми словами о использовании LORA могу сказать так, если для выпечки есть только квадратная форма, а хочется кекс в форме зайчика, тогда берем форму зайчика и в неё заливаем тесто. В статье о том, в каких случаях применение моделей LORA становится необходимым, как найти подходящий вариант LORA, а также как создать изображений с помощью нейросети FLUX с применением моделей LORA.

Модели LORA для генерации изображений в нейросети FLUX
Модели LORA для генерации изображений в нейросети FLUX

Когда необходима модель LORA?

В предыдущем материале о нейросети FLUX я делала акцент на его достоинствах и недостатках. Проработаем недочеты FLUX с помощью моделей LORA.

  • Двойная композиция. Удаётся в 3 случаях из десяти, это низкий процент попадания, поэтому модель LORA необходима.
a woman's face with double exposure and motion blur effects, (surreal portrait photo:1.4), (double exposure:1.2), (motion blur:1.2), (artistic:1.2), black and white, high contrast, intricate details, soft focus, ethereal lighting, abstract, evocative, layered images, dynamic, expressive, medium close-up, 50mm lens, f/1.8, dreamlike, introspective, experimental, <lora:715497:1>
Генерации изображений в нейросети FLUX с применением LORA (слева) и без неё - справа
Генерации изображений в нейросети FLUX с применением LORA (слева) и без неё - справа
  • Сюрреализм. Нейросеть FLUX обучали на фотореалистичных картинках, поэтому возникают большие сложности с генерацией сюрреалистичных изображений.
Слева с применением модели LORA, справа - нет
Слева с применением модели LORA, справа - нет
  • Художественные стили. Нейросеть FLUX плохо справляется с художественными направлениями и недостаточно хорошо подражает стилям известных художников. Поправляется это дело коллекцией моделей LORA. Например, создадим рисунок в китайском стиле Уся.
Модели LORA для подражания стилям художников (слева с LORA)
Модели LORA для подражания стилям художников (слева с LORA)
  • Узкоспециализированные сферы. Например, есть модели для прорисовки вязанных изделий, антропоморфных животных. Я нашла модель LoRA, которая изображает рисунки на латте. Нижние картинки генерировала по промту:
latte mug with a kayak pattern on milk foam, decorated with chocolate chips, summer terrace, autumn leaves fly by, <lora:689675:1>, fluxlatte
Модель LoRA для узкоспециализированной сферы
Модель LoRA для узкоспециализированной сферы
  • Улучшение фотореализма. Такие модели LoRA пригодятся для создания детализированных изображений продуктов питания или архитектурных проектов.
  • Киберпанк. Распространенные модели LoRA. Особенно пригождаются, когда хочется больший акцент сделать на этом стиле.
Модель LoRA киберпанк
Модель LoRA киберпанк
  • Персонажи компьютерных игр. С помощью LoRA можно создавать детализированные изображения определенных персонажей. Например, для тех, кто делает обзоры игр, эта LoRA пригодится при создании обложек на статьи или видео.

Как найти нужную модель LORA?

Многим известен сайт civitai.com - там огромная коллекция различных моделей LORA. Для удобства пользуйтесь строкой поиска и фильтрами. Например, чтобы не тратить время на просмотр всех страниц в поисках нужной модели LORA, можете прописать в строке поиска "flux double exposure" , а в фильтрах выбрать нейросеть "FLUX. 1D".

В строке поиска пишем "flux double exposure"
В строке поиска пишем "flux double exposure"

Также модели LORA можно поискать на форуме Yes AI в галерее. Все LORA из галереи форума установлены в телеграм-боте и доступны для применения.

Модели LORA можно поискать на форуме Yes AI
Модели LORA можно поискать на форуме Yes AI

Если на сайте civitai.com есть LORA, которая не установлена в телеграм-боте, то я просто копирую ссылку на неё и отправляю боту в телеграмм. Через пару минут установка пройдет и LORA будет доступна для генераций изображений нейросетью FLUX.

Установка LORA в телеграм-боте
Установка LORA в телеграм-боте

Как создать изображения с помощью нейросети FLUX с применением моделей LORA?

Для генерации изображения в нейросети FLUX с использованием моделей LORA – я захожу в телеграмм-бот. Выбираю необходимые настройки. Пишу детальный промт и отправляю текст боту. Кстати, писать промт можно и на русском языке, что сильно облегчает задачу.

Отправляю промт боту и получаю сгенерированное изображение
Отправляю промт боту и получаю сгенерированное изображение

Под изображением есть набор инструментов, которым можно воспользоваться для дальнейшей работы.

Набор инструментов для работы с изображением
Набор инструментов для работы с изображением

Разберем по порядку:

  • "скачать файл HQ+". С помощью этой кнопки вы можете скачать изображение в качестве
  • "Inpaint". Любые недочеты можно исправить с помощью этой кнопки. Например, убрать лишние детали на изображении или наоборот - добавить.
  • "анимировать изображение". Чтобы картинка ожила и корабль поплыл - жмите на неё.
  • "Репост на форум". За репост начисляются баллы и на них можно генерировать в Dalle и Stable Diffusion.
  • "Повторить". После нажатия которой данный промт запустится в работу.

Используйте модели LORA и получайте шедевральные изображения в нейросети FLUX!