Исследователи Санкт-Петербургского Федерального исследовательского центра Российской академии наук (СПб ФИЦ РАН) разработали систему, которая способна распознавать эмоции человека. Об этом говорится в сообщении на сайте РАН.
Отмечается, что такие системы смогут работать даже в трудных условиях – при шуме, плохом освещении или если человек молчит или не смотрит в камеру. Кроме того, ИИ-сервисы смогут распознавать сложные эмоции, например, сарказм или иронию, когда смысл слов не совпадает с интонацией или выражением лица. Это поможет улучшить работу цифровых помощников.
«Мы разработали интеллектуальную систему <...> для многомодального анализа видео, звука и текста для распознавания эмоций человека, например, радости, злости, грусти и прочих эмоциональных проявлений. Кроме того, программа может проводить сентимент-анализ информации – определять отношение человека к какому-либо событию», – пояснил руководитель Лаборатории речевых и многомодальных интерфейсов СПб ФИЦ РАН Алексей Карпов, слова которого приводятся в сообщении.
Система работает на основе нескольких нейросетей, которые обучали на десятке открытых для исследователей баз данных. Они содержат мультиязычные аудио- и видеозаписи людей разного возраста, пола и из разных стран. Для русскоязычной базы, например, привлекали студентов театральных вузов, которые изображали разные эмоции.
Программа умеет распознавать семь основных эмоций человека: радость, грусть, страх, отвращение, удивление, злость и спокойствие. Кроме того, она определяет общий эмоциональный тон – положительный, отрицательный или нейтральный.
Разработка представляет собой приложение с простым интерфейсом: в него можно загрузить любые аудио- или видеозаписи. Система автоматически обработает их и покажет результат – распознанные эмоции и общий тон.
Фото: WANAN YOSSINGKUM / iStock
Самые актуальные новости стран БРИКС https://tvbrics.com