Ученые Белгородского государственного национального исследовательского университета (НИУ «БелГУ») создают систему, которая определяет эмоциональное состояние человека и выявляет признаки деструктивного поведения — в том числе лжи — по параметрам голоса. Технология анализирует не смысл слов, а акустические особенности речи.
В работе задействованы молодые исследователи под руководством заведующей кафедрой автоматизированных систем и технологий, кандидата технических наук Татьяны Балабановой. «Разработка гибридных технологий анализа речевых сигналов» реализуется в рамках стратегического проекта «Цифровые технологии, искусственный интеллект, беспилотные системы».
Как отмечают ученые, в центре внимания находится не содержание сказанного, а то, как именно говорит человек. Дело в том, что эмоциональное состояние отражается в параметрах речевого сигнала, которые человек сознательно почти не контролирует — именно их и анализирует создаваемая технология.
В проект входит несколько направлений:
— разработка системы распознавания эмоций по русскоязычной речи;
— создание русскоязычного датасета лживой и правдивой речи;
— формирование системы распознавания деструктивного поведения, в том числе лжи, по речевому сигналу.
Работу в области паралингвистического анализа речи университет ведет с 2023 года, а сам проект — с 2025 года. Как отмечает руководитель проекта Татьяна Балабанова, прототип системы распознавания эмоций по речи уже создан, он различает радость, грусть, нейтральное состояние и злость. В разработке используются классические методы цифровой обработки сигналов и нейросетевые технологии.
Одно из ключевых преимуществ проекта — ориентированность на русскоязычную речь. По словам исследователей, большинство существующих решений в этой области создается на основе англоязычных наборов данных, что ограничивает их практическое применение в российской среде.
Разработчики считают, что эта технология найдет применение в разных сферах. С ее помощью можно выявлять акустические сигналы гнева и агрессивного поведения в общественных местах, анализировать эмоциональное состояние специалистов, работающих в условиях повышенной ответственности, включая водителей и пилотов, а также повышать качество работы колл-центров и эффективность образовательного процесса.
Проект реализуется в рамках программы Минобрнауки России «Приоритет-2030» (национальный проект «Молодежь и дети»).