Одна из российских нейросетей, генерирующих изображение, теперь может не только генерировать изображение "с нуля", но и брать за основу пользовательскую фотографию, и преображать её по запросу.
Сама YandexART встроена в приложение Шедеврум, являющееся подобием фотоцентричной социальной сети, где весь контент сгенерирован нейросетью.
За последние пару лет Яндекс значительно продвинулся в разработке ПО, генерирующего изображения. И хотя другие крупные ИТ-компании также сделали большие шаги в этом направлении, ранее всё сводилось, как и везде в мире, к генерации изображений из текстового запроса.
Однако теперь данные технологии вышли на принципиально новый уровень: нейросетевое редактирование изображений. Да, данная функция сама по себе не является чем-то новым, но в столь удобном интерфейсе, в социальной сети, и при этом бесплатно — доступна впервые в мире.
И хотя на текущий момент этот функционал выложен в демонстрационном, или, по ощущениям, экспериментальном виде, будущее, чувствую, тут большое, ведь в будущем, думаю, так можно будет осуществлять монтаж и ретушь фотографий без потери качества и практически моментально.
Что же умеет интеллектуальная обработка изображений от Яндекса на данный момент? Люди на фотографиях, после подобной обработки, зачастую, сильно меняют черты лица, из-за чего обработку портретов лучше отложить до более новых версий. Зато вот с пейзажами эксперименты гораздо более интересные.
За основу я взял свою фотографию из недавней поездки в горный парк Рускеала в Карелии. Нейросеть пока что работает только с квадратными картинками, поэтому пришлось взять лишь левую часть из неё.
Данная нейросеть при обработке принимает два основных параметра:
- Больше или меньше генерации — насколько сильно нужно менять изначальную фотографию
- Сохранять ли основные контуры — если да, то нейросеть будет скорее раскрашивать изображение, чем перерисовывать. Если же нет, то нейросеть сохранит лишь общие очертания фотографии.
Есть ещё третий параметр — указание, чего не должно быть на изображении. Но его влияние на результат минимально.
Прежде всего, можно менять стиль "рисовки". Например, в виде комикса или живописи:
Левая картинка, кстати, выглядит как реальный кадр из какого-нибудь аниме. Да и правая тоже тянет на рисованную от руки картину. Но эти функции, в целом, были в фоторедакторах уже давно.
Вот кое-что более интересное: попробуем обработать данную фотографию запросом "Весна" с различными параметрами, о которых я написал чуть выше:
Действительно, выглядит интересно. Да, пока без высокого разрешения итоговой "фотографии", но, в целом, здорово.
Попробуем превратить тот же пейзаж в другие времена года и суток:
Погоду я тоже пробовал генерировать, но тут уже эффекта от этой генерации минимум:
Зато немного интереснее выглядит "переделка" фотографии в другой пейзаж, разумеется, без чёткого сохранения контура:
Если гольф-поле, ясное дело, является сильным изменением, то вот сгенерированная река выглядит довольно корректно по сути: тот же крутой берег с деревьями, разве что всё оттаяло...
Пока что, конечно, этот функционал едва ли можно применить на практике, ведь даже генерировать превью-картинки к статьям логичнее из запроса "с нуля". Но когда разрешение изображений станет высоким, как и качество работы нейросети с мелкими деталями, будет интересно обрабатывать даже селфи)
Подписывайтесь, ставьте лайки, у меня много интересного о российской электронике и технологиях
Читайте также: