Модель, полное название которой Generative Facial Prior-Generative Adversarial Network, может восстанавливать поврежденные изображения и изображения с низким разрешением.
Инструмент, разработанный исследователями из китайской компании Tencent, можно использовать бесплатно, и его можно загрузить через GitHub .
Инструмент использует как собственную модель Tencent, так и предварительно обученную модель StyleGAN-2 от Nvidia — аналогичную системе, используемой для разработки GauGAN , модели генерации изображений Nvidia.
В документе , описывающем, как работает модель, команда искусственного интеллекта Tencent использовала две модели, чтобы эффективно заполнить недостающие элементы старого изображения. Всего за несколько секунд объединенная мощность двух моделей может превратить низкокачественные изображения в новые и более качественные.
В документе предполагается, что модель «хорошо работает на большинстве темнокожих лиц и различных группах населения» благодаря сочетанию предварительно обученных данных и данных из входного изображения.
Команда Tencent отметила, что цвет человека на входном портрете может казаться светлее, чем исходный тон кожи на изображении в градациях серого, поскольку «входные данные не содержат достаточной информации о цвете». Чтобы еще больше исправить это, авторы статьи предполагают, что для полной реализации потенциала модели необходим разнообразный и сбалансированный набор данных.
ИИ и изображения
GFP-GAN появился, когда DALL-E 2 произвел фурор в социальных сетях для создания изображений из текстовых подсказок.
Модель, разработанная OpenAI, использовалась для создания альтернативных версий «Девушки с жемчужной сережкой» Иоганна Вермеера, обложки журнала Cosmopolitan и изображений кетчупа для бренда приправ Heinz.