Немало времени и сил отнимает у профессионалов создание и редактирование цифровых изображений, но исследователи из совместной лаборатории MIT и IBM пришли на помощь. Они научили ИИ создавать фотореалистичные изображения с нуля, а также моментально редактировать отдельные объекты.
Результат наработок получил название GAN Paint Studio, это онлайн-фоторедактор, который позволяет пользователям загружать любые фотографии и редактировать внешний вид объектов автоматически. Все, что нужно, это загрузить исходное изображение, выбрать коллекцию настроек редактирования и указать область редактирования.
В основе приложения заложена система машинного обучения, которая создает отображение исходной картинки и умеет распознавать контекст. Главным открытием для ученых стало понимание того, как нейросети учатся по контексту, ведь до этого они были просто "черными ящиками". Это значит, что теперь дерево никогда не появится в воздухе, и при этом система сама адаптирует его размещение на снимке.
Кроме того, система создает различные визуальные эффекты в зависимости от контекста. Например, если попросить GAN Paint Studio добавить двери в два разных здания, это не приведет к дублированию дверей: они, скорее всего, будут сильно отличаться друг от друга. И это только верхушка айсберга. GAN Paint Studio может «включать» прикроватные лампы, которые ранее были выключены, восстанавливать цвет растений в зависимости от времени года, устанавливать окна в интерьерах квартир и добавлять купола на крышах зданий.
Как отмечают исследователи, система все еще находится в разработке, поэтому хотя скорость и интуитивность вызывают восхищение, степень проработки оставляет желать лучшего. Зато ляпы со стаканчиками Starbucks уже не будут актуальны.
Будет интересно узнать, сможет ли новый алгоритм Adobe распознавать манипуляции, сделанные с помощью GAN Paint Studio.