Найти тему
Восемь красных линий

Deepfake-видео можно вычислить по отражениям в глазах

Достижения науки в области искусственного интеллекта и нейросетей привели к появлению большого количества поддельного видеоконтента, известного как дипфейки (deepfake). Мы уже не раз говорили, какую опасность представляют собой такие видеоподделки.

Deepfake – технология синтеза изображений, основанная на искусственном интеллекте, которая используется для реалистичных манипуляций с изображениями и видео. По сути, тот же "Фотошоп", только теперь с использованием видео.

С помощью новой технологии можно изменить, например, внешность человека, его голос, и даже то, что человек говорит на как будто настоящей видеозаписи.

Не так давно мы уже писали о том, что программисты нашли способ обмана ловцов дипфейков.  По словам учёных, такие разработки делает дипфейки ещё более серьёзной угрозой.

Но исследователи из Университета Буффало (Нью-Йорк), работающие во главе с профессором Сывэй Лю (Siwei Lyu), разработали технологию, которая, по их словам, способна выявлять подделки с точностью 94%. Она опирается на еле заметные отражения в глазах людей, изображённых на видео.

"Роговица глаза представляет собой почти идеальную полусферу, и она очень хорошо отражает свет, - поясняет Лю. - Соответственно, окружающая человека реальность будет отражаться на роговице. Также отражения в обоих глазах должны быть очень похожи, потому что они видят одно и то же. Сами мы обычно не замечаем этого, когда смотрим в глаза собеседнику".

При этом для создания deepfake-видео программа использует огромное количество доступных ей изображений. Это необходимо, чтобы сгенерировать реалистичную картинку. Но в то же время из-за этого технологии deepfake не могут качественно воссоздать такую мелкую деталь, как отражение в глазах.

Лю и его команда разработали технологию, пользующуюся этим недостатком. Она составляет карту лица, отдельно "исследуя" глазные яблоки и свет, отражающийся в них. Затем программа в мельчайших деталях сравнивает отражения и находит отличия в форме, яркости и интенсивности света.

Несмотря на многообещающие результаты тестов, показавших 94-процентную эффективность, команда отмечает, что у этой технологии всё ещё есть некоторые ограничения.

Например, ей необходимо чёткое изображение самих глаз. Также препятствием может стать программное обеспечение, используемое для редактирования видео и позволяющее пририсовать в глаза правильное симметричное отражение.

Исследование пока описано
в препринте статьи.

Если вам нравятся наши новости, подписывайтесь на наш канал и не забывайте ставить лайки. Эти нехитрые действия помогают нам в развитии и сборе средств для финансирования проекта.

Также наши сообщества есть в Telegram, twitter, ВК, Facebook, "Одноклассниках". Приходите, если вы бываете там чаще, чем на Дзене. Кроме того, там выходят наши короткие подборки новостей науки и технологий, о которых должен знать каждый.

Читайте также:

Самая маленькая фигурка-оригами в мире сама сложилась в птичку

Жестикуляция говорящего влияет на то, что мы слышим

Инженеры MIT освоили печать полноценных дронов и роботов