Как я рисую с помощью нейросетей

"Нейросети лишат нас работы!"

Угу, уже бегут. Прототипирование с помощью нейросетей - это удобно, но художников они точно не заменят. Это то, что вам скажет любой человек, работающий с нейросетями по изображениям. Генеративные нейросети вроде Миджорней могут вас, конечно, порадовать. Но в основном результат там получается типичный, на основе сотен тысяч других картинок. Никакой уникальности и своего почерка. Только создание референса.

Я же не пользуюсь практически генеративными нейросетями. Скорее они у меня работают как способ довести до ума набросок. Простой пример - как из детского рисунка племяшка делала себе аватарку.

1- исходный детский рисунок, 2 - результат первой обработки, 3 - результат вклеивания картинки на фон, 4 - повторная обработка нейросетью

Для исходника вы можете использовать не только детский рисунок или набросок. Можно взять случайную картинку, которую нейросеть наполнит ЗНАКОМЫМИ результатами.

Например, как я рисовал богатыря - это мучительная эпопея на полтора-два часа.

Нейросеть не знает, что такое кольчуга, поэтому он приделал богатырю наплечники. Да и глаза скосила, молодец. Пришлось перерисовывать глаза с помощью чёрных точек.

У вас есть первоисходник, который можно перерисовать на свой лад, дополнить деталями. Но перед тем, как закинуть в нейросеть и получить свой результат, помните, что нейросеть пока работает как чёрный ящик. И вместо нормального результата, например, моего богатыря, она может выдать мне... космонавта:

Да, именно это я и просил (нет).

Другая проблема - ограничения с рисовкой разных дополнительных деталей. Если вы можете сделать из себя кентавра, эльфа или другого монстра, то циклопом вам не суждено стать:

Циклоп из одного известного американского актера. Я нарисовал большой глаз, но нейросеть требует свое.

Дело в том, что нейросетка натренирована видеть именно человеческие лица. Заостренные уши, зеленая кожа орка/гоблина/огра (как в Шреке) вам оставят. Но один глаз нейросеть не поймет. Что, а как это? Мне нужно два глаза. Поэтому даже циклоп из Хроник Нарнии превратился во вполне двуглазого дяденьку с перекошенным лицом.

Нос есть, рот есть, а где второй глаз? Дорисуем!

Поэтому у нейросетей есть ограничения. Конечно, вам не обязательно рисовать так реконструкции битв при Полтаве или разрушение Аютии кхмерами. Потому что в противном случае, вам придется помучаться с отдельными деталями и играть в изобретательное ИЗО.

Другая задача - нейросеть не знает, что такое рукава кафтана и русская рубаха, поэтому рисует его как модный аксессуар. Согласен, русская одежда - это очень стильно, но рубаху пришлось перерисовывать - убирать планку (рубаху надевали через верх и подпоясывались), добавить пуговицы. Большая картинка - результат, все остальное - неудачные генерации.

К тому же, нейросеть в обработке может обратить пристальное влияние фону и совсем не придать внимание лицу. Тогда у вас будут безликие люди на хорошо проработанном фоне. Так себе композиционное решение.

Резюмируем:

1. Нейросети хорошо справляются с простыми фото и рисунками.

2. Нейросети пока не умеют рисовать циклопов. Если нет важной детали человеческого лица, то нейросеть её дорисует.

3.Нейросетям сложно справляться со специализированными изображениями. Киберпанк - пожалуйста. А вот исторические детали, орнаменты, оружие - увы и ах.

PS. Если кому-то интересно, что там рисуется, то вот ссылка на мою доску в пинтересте.