Найти в Дзене

Я в роли артдиректора с нейросетью Stable Diffusion

Большая вводная статья про использование нейросетей, ИИ, нейронок и генераторов в творческом процессе иллюстратора и графического дизайнера. Ну что ж пришло время поговорить про нейронки подробнее. Наделали они много шума за последнее время. Это будет уже моя вторая статья по теме, но так как информации очень много и она разная, структурированно рассказать все про нейронки за раз или за два не получится. Самое главное, обращаю ваше внимание, я говорю со стороны художника и иллюстратора, который хочет приручить ИИ и превратить его в мощный вспомогательный инструмент в работе. Я люблю новое, обновления программ для дизайнеров и иллюстраторов, все то что может ускорить процессы, облегчить создание своих проектов и т.п. Поэтому всегда на волне таких штук, сразу стараюсь протестировать возможности и придумать где смогу применить тот или иной инструмент. Так было и с появившимися несколько лет назад генераторами изображений и логотипов, но они еще были примитивны и заточены на выполнение в о

Большая вводная статья про использование нейросетей, ИИ, нейронок и генераторов в творческом процессе иллюстратора и графического дизайнера.

Космический коллаж создан при помощи генерации в Stable Diffusion
Космический коллаж создан при помощи генерации в Stable Diffusion

Ну что ж пришло время поговорить про нейронки подробнее. Наделали они много шума за последнее время. Это будет уже моя вторая статья по теме, но так как информации очень много и она разная, структурированно рассказать все про нейронки за раз или за два не получится. Самое главное, обращаю ваше внимание, я говорю со стороны художника и иллюстратора, который хочет приручить ИИ и превратить его в мощный вспомогательный инструмент в работе.

Фантазийный растительный орнамент создан при помощи dreamlike.art
Фантазийный растительный орнамент создан при помощи dreamlike.art

Я люблю новое, обновления программ для дизайнеров и иллюстраторов, все то что может ускорить процессы, облегчить создание своих проектов и т.п. Поэтому всегда на волне таких штук, сразу стараюсь протестировать возможности и придумать где смогу применить тот или иной инструмент. Так было и с появившимися несколько лет назад генераторами изображений и логотипов, но они еще были примитивны и заточены на выполнение в основном абстрактных картинок. В моем арсенале прижились лишь генераторы случайных слов и нейминга для бизнеса.

Генератор нейминга связанный с генератором логотипов https://namelix.com/ и app.brandmark.io
Генератор нейминга связанный с генератором логотипов https://namelix.com/ и app.brandmark.io

В прошлом году случился новый виток в этой области и я сразу же начала тестировать все доступные мне генераторы изображений, текстов и музыки. Конечно с упором в основном на генераторы изображений.

На данный момент в моем арсенале инструментов для работы плотно обосновался Stable Diffusion, т.к. на сегодняшний день он действительно бесплатный и имеет огромное комьюнити людей, программистов, которые его прокачивают создают разные модели, обучают на определенные стили, стараются решить проблему с рисованием рук и лиц, делятся опытом и рассказывают о тонкостях работы с ИИ. В общем, не смотря на то, что бы им комфортно пользоваться надо иметь хороший компьютер с неплохой видеокартой, у меня была возможность раскатить его у себя локально и я ею воспользовалась.

Космический коллаж создан при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию в стиле обложек комиксов
Космический коллаж создан при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию в стиле обложек комиксов

В этом лонгриде работы сделаны именно с помощью Stable Diffusion. В дальнейшем постараюсь раскрыть тонкости работы с другими популярными нейронками и результаты тестов.

Для вау-эффекта в основном все делятся очень детализированными фотореалистичными картинками, с кучей света, в стиле диджитал с Artstation. Но мне было интересно делать разные стилизации, для дальнейшей векторной обработки, иллюстраций в разных стилях и их смешение, для использования в графическом дизайна. Основной задачей для себя ставила повторяемость стиля, что бы можно было запилить целый проект, который будет выглядеть единообразно. И на основе получившегося мудборда/референсов уже детализировать и работать над задачей используя сгенерированные картинки как скетч.

Моя собака породы чихуахуа в чиби-стикер стиле, создана при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию со смешением стилей чиби, стикеры, вектор и ретро
Моя собака породы чихуахуа в чиби-стикер стиле, создана при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию со смешением стилей чиби, стикеры, вектор и ретро

Одно из первых направлений, которое я выбрала это было чиби-аниме с переплетением стилизации под стикеры для мессенджеров. Проще всего этот стиль было начать тестировать на разных животных, т.к. я понимаю в мировой базе таких картинок очень много. Нейронка должна была быстро сообразить что от нее хочу. Я конечно усложнила задачу примешав в промт стиль ретро мультиков, но в основном это отразилось на цвете, добавлению текстур и ретро-паттернов.

Наигравшись в запросах с разными животными я остановилась на чихуахуа, для создания стикер пака в едином найденном с помощью нейронки стиле.

Ниже можно увидеть лишь небольшую часть вариаций, которую мне пришлось перебрать, пока я подбирала нужные слова для понимания нейросети.

Моя собака породы чихуахуа в чиби-стикер стиле, создана при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию со смешением стилей чиби, стикеры, вектор и ретро
Моя собака породы чихуахуа в чиби-стикер стиле, создана при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию со смешением стилей чиби, стикеры, вектор и ретро

Конечно совсем идеального результата, который не будет требовать доработки пока получить в нейронках нельзя.

И этот стикер пак я ещё буду доделывать и отрисовывать в векторе (нейронки в вектор пока не могут, только растр и к сожалению даже еще пока без слоев как в psd, и есть прочие технические проблемы по качеству). Это просто хороший инструмент для быстрого наглядного просмотра результата совмещения стилей, анализа основных особенностей этих стилей, создания мудборда и референсов, с которых можно уже без страха формировать свою задумку и рисовать не боясь что вы у кого-то что-то украли. Именно из-за того что можно объединить несколько стилистик, поработать над визуализацией поз и эмоций - это будет уже ваш собственный набор, который собран из вдохновения миллионами изображений и текстовых данных.

Действительно сильно ускоряет продумывание, дает возможность быстро отказаться и отмести неудачные варианты стиля или позы.

Итоговый стикер пак, с которым я буду работать дальше, создана при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию со смешением стилей чиби, стикеры, вектор и ретро
Итоговый стикер пак, с которым я буду работать дальше, создана при помощи генерации в Stable Diffusion и после стилизован под иллюстрацию со смешением стилей чиби, стикеры, вектор и ретро

Тут можете видеть мой окончательный мудборд, проанализировав который я знаю что буду делать с обводкой, в каком цвете, с какими пятнами, бликами и в каком стиле нарисую глаза и уши - самые выразительные части лица этой породы собак.

Получается что теперь в моем паплайне работы над проектами появились нейронки. Мне для раскачки идей и воображения сначала хочется зайти в нейронку и ввести запрос в ней, а не в поисковик по картинкам.

Итоговый стикерпак пока не готов, но как только залью его в Телеграм, напишу об этом в посте тут.

Мне кажется я уже много понаписала, восторг льется через край, так что ниже в кратце примеры других стилей, которые я нагенерила в SD.

Акварель в Stable Diffusion.

Акварельные медведи создан при помощи генерации в Stable Diffusion
Акварельные медведи создан при помощи генерации в Stable Diffusion

Для работы в таком стиле я скачала дополнительную модель, которая была натренирована на работы одной популярной художницы, которая создает как раз такие экспрессивные работы акварелью. Но при этом если приноровиться к этой модели, регулировать силу эффекта, можно полностью уйти в другую стилистику с меньшим количеством разводов и пятен. Так же для изначального запроса я всегда стараюсь сгенерировать просто фотореалистичное изображение нужного объекта, и когда результат мне нравится, начинаю добавлять слова регулирующие стили.

Акварельные чишки созданы при помощи генерации в Stable Diffusion
Акварельные чишки созданы при помощи генерации в Stable Diffusion

Дополнительные модули можно скачать вот тут:

Civitai | Stable Diffusion models, embeddings, hypernetworks and more

Чекпоинт с акварельным стилем, который я использовала:

Rachel Walker Style Watercolor | Stable Diffusion Checkpoint | Civitai

Есть ещё один, но я его еще не успела протестировать:

Vivid Watercolors | Stable Diffusion Checkpoint | Civitai

Генерация фотореалистичных детализированных картинок.

Лисички Феньки созданы при помощи генерации в Stable Diffusion
Лисички Феньки созданы при помощи генерации в Stable Diffusion

Для генерации большей части картинок я использую 2 хорошо сбалансированных чекпоинта (модуля). Они действительно практически не дают совсем страшных результатов, анатомия вся более менее на месте, пропорции хорошие, предметы адекватные т.д.

Deliberate | Stable Diffusion Checkpoint | Civitai

С этим модулем можно нагенерить все что угодно как в реалистичном стиле с адекватным мягким освещением, так и картинки с вау-эффектом в стиле диджитал как у Midjourney.

Art & Eros (aEros) - A tribute to beauty | Stable Diffusion Checkpoint | Civitai

Стилистика популярного Киберпанка и много неона.

Неоновые медузы и космический город будущего созданы при помощи генерации в Stable Diffusion
Неоновые медузы и космический город будущего созданы при помощи генерации в Stable Diffusion

Аниме стиль в персонажах, пейзажах и атмосферных композициях.

Аниме девочки созданы при помощи генерации в Stable
Аниме девочки созданы при помощи генерации в Stable
Пейзаж в стиле аниме с морем света, атмосферностью и романтикой созданы при помощи генерации в Stable
Пейзаж в стиле аниме с морем света, атмосферностью и романтикой созданы при помощи генерации в Stable

В стиле комиксов и мужские персонажи

созданы при помощи генерации в Stable
созданы при помощи генерации в Stable

За полгода я нагенерила уже кучу тем и стилей, так же много успела использовать для своих артов и живописи, многие генерации послужили хорошим отправным пунктом для некоторых комерческих проектов, которые пока что я не могу опубликовать.

В последующих постах на эту тему буду уделять внимание конкретным узконаправленным стилям, промтам, разбору модулей и т.п. технической информации и творческой реализации.

Думаю стоит на этом пока закончить первый лонгрид по теме нейронок. Что бы не случилось перенасыщения картинками и информацией.

Спасибо за интерес! Творите и не закрывайтесь от нового!