CariGAN – нейросеть, которая способна создавать на основе фотографий или кадров видео карикатуры. Их сложно отличить от тех, которые рисуют художники карандашами и красками.
Работает нейросеть в два этапа. Сначала CariGeoGAN определяет форму человеческого лица, создает карикатурную модель. CariStyGan придает обработанному изображению художественный стиль. Разработчики добились таких результатов, обучив искусственный интеллект на примере тысяч карикатур, которые на самом деле были нарисованы от руки.
Эффективность программы проверялась по двум критериям: схожесть с оригиналом, а также тем, чтобы карикатура выглядела как нарисованная. По предоставленным разработчикам снимкам четко видно, что со вторым заданием программа полностью справилась. Карикатуры смешные и большая их часть очень схожа с теми, которые рисуют художники своими руками.
Люди с нетипичными чертами лица, получились очень узнаваемыми на обработанном изображении, например Трамп. А вот актрису Кортни Кокс узнать практически не реально, карикатура на нее получилась жуткой, а не смешной. Разработчикам еще есть над чем работать.