Найти тему

Как пользоваться нейросетью Kandinsky: как улучшить картинки из нейросети "Шедеврум"

Оглавление

Эти две отечественные нейросети полюбились пользователям за простоту и доступность. Обе бесплатные и обе понимают описания на русском языке. У каждой есть свои особенности. Нейросеть "Шедеврум" очень креативная, чего не хватает нейросети Kandinsky. Но благодаря одной функции Kandinsky можно исправить кривые, но креативные картинки "Шедеврума".

Приветствую вас на седьмом уроке бесплатного курса по работе в нейросети Kandinsky. Первые шесть уроков вы можете найти в подборке на этом канале.

В этом уроке мы продолжим использовать для генерации картинок Телеграмм-бот Kandinsky. Можете сразу открыть его по ссылке ниже.

Телеграмм-бот Kandinsky

На примере исправления картинок из нейросети Яндекса мы познакомимся с четвёртым режимом работы телеграмм-бота "Вариации картинки"

Режим "Вариации картинки"

Сам процесс использования очень простой - вам надо просто загрузить картинку и дождаться результата. Искусственный интеллект считает изображение и предложит новый вариант.

В отличие от других режимов работы с картинками в телеграмм-боте Kandinsky нейросеть считывает не просто зерно изображения, а максимально сохраняет особенности и детали изображения.

Одно и тоже изображение можно прогонять через нейросеть многократно и каждый раз она будет предлагать новый вариант, но близкий к загруженному.

Плюс такой генерации в том, что считывая картинку плохого качества нейросеть Kandinsky умеет улучшать изображение. Да, пока эта нейросеть ограничена хоть и большой, но недостаточной базой обучения. Но даже на существующем уровне качество прорисовки лучше, чем в другой русской нейросети "Шедеврум".

Примеры улучшения картинок из "Шедеврум"

На момент выхода этого урока нейросеть "Шедеврум" заметно отстаёт от Kandinsky в качестве: много шума, зернистости, артефактов. Но при этом есть и большой потенциал - сгенерированные картинки действительно очень оригинальные, креативные. Особенно хорошо у неё получаются юмористические картинки.

Но и женские портреты достойны внимания, хотя требуют доработки.

Для этого урока я выбрала пять совершенно разных женских портретов.

С первой попытки

С некоторыми картинками режим "Вариации картинки" выдаёт удачный вариант с первого раза. Если в своих экспериментах вам повезёт начать именно с таких картинок - вам повезло, вас сразу впечатлит результат.

Конечно, следует понимать, что результат генерации - это не улучшение как в Фотошопе и не "рисование точь-в-точь". Это новый вариант, но очень близкий.

Например, девушка на исходнике среди ветвей цветущего дерева, в красивых украшениях с синими камнями, в открытом платье, брюнетка, выразительные глаза.

Девушка на вариации от Kandynsky - описание выше соответствует ей полностью.

-2

При этом при повторных генерациях черты лица девушек очень похожи, в некоторых случаях это практически одно и тоже лицо.

Такие странные и необычные образы нейросеть Kandinsky тоже очень хорошо понимает и выдаёт достойные вариации тоже с первого раза.

-4

Обратите внимание, что при следующих генерациях общий образ сохраняется. Это значит, что на основе одной картинки вы не получите кардинально разные варианты. Это будут действительно вариации одного образа.

Особенно хорошо эту особенность сохранения одного образа видно на этом примере. Отличный результат так же с первого раза.

-6

Но Kandinsky интерпретировал перья как элемент головного убора и продолжает его повторять. Вы ничего с этим не поделаете - он так понял, он так и будет рисовать. Для чистоты эксперимента я повторила вариации через сутки - ничего не изменилось.

Наберитесь терпения

Но на самом деле в половине случаев вы не получите удачный результат с первого раза. Более того, вариант от Kandinsky может выглядеть просто ужасно. Так было с портретом этой рыжеволосой девушки.

Первые семь попыток лицо девушки просто стекало вниз - буквально. Даже не буду показывать вам эти варианты, потому что это было очень страшно.

Дело в том, что на исходнике много шума и нечётких линий. Хотя в целом он смотрится красивым и вполне законченным. Лицо не искажено, глаза на месте. Кстати, "Шедеврум" очень старательно прорисовывает глаза. Если эту нейросеть продолжат обучать, она будет генерировать действительно качественные красивые лица.

-8

Как видите, красивый женский портрет рыжеволосой юной красавицы с цветами в волосах я всё же от нейросети Kandinsky получила. И для этого понадобилось действительно много повторов.

Я не нашла информации о самообучаемости этого искусственного интеллекта, но ощущение складывается именно такое. Словно модель тренируется и в конце концов отсекает весь шум и помехи. После первого удачного варианта ещё были кривые лица, но их становилось всё меньше и меньше. В конце-концов через 20 минут все вариации получались удачно.

Что это если не самообучение искусственного интеллекта?

Вариация по вариации

Ещё один пример улучшения картинки из нейросети "Шедеврум" - на этот раз пошаговый.

На исходнике очень мало информации для создания проработанного образа. И вот этот конечный вариант картинки, это не просто многократная генерация как в примере выше.

Это пошаговая вариация новой картинки на основе предыдущей вариации.

-10

Для получения этого варианта достаточно было двух шагов. Сначала получилось первое фото в галерее. Затем на его основе было сгенерировано второе.

Эту цепочку можно продолжить и дальше. Результат начнёт немного меняться. В моём случае девушка становится моложе и романтичнее.

Подведём итог

Если вас не устраивает сдержанность нейросети Kandinsky, вы можете использовать связку двух нейросетей: Kandinsky + "Шедеврум".

В "Шедеврум" вы легко получите очень нестандартный оригинальный результат. В Kandinsky на его основе вы получите качественную прорисовку с минимумом шума и артефактов.

Если первый вариант генерации оказался неудачным и даже страшным - не останавливайтесь. Продолжайте генерации, тем самым обучая модель лучше понимать вашу картинку.

Надеюсь эта статья была для вас полезна. До встречи в новом уроке "Нейросеть Kandinsky: генерируем картинки в профессиональном режиме".

Не забудьте подписаться на канал, чтобы не пропустить новые уроки.

Все уроки курса ищите в этой подборке:

Курс по Kandinsky