Новосибирский университет разработал переводчик языка жестов на основе ИИ

В Новосибирском государственном университете разработали новое приложение, которое позволяет быстро и точно переводить жесты в текст. Это решение основано на современных технологиях искусственного интеллекта и предназначено для работы как на компьютерах, так и на мобильных устройствах. Об этом сообщила пресс-служба НГУ.

Разработчик приложения Ярослав Чеканов самостоятельно изучил русский жестовый язык и собрал обширный массив данных для обучения искусственного интеллекта. В результате ему удалось создать тестовое решение, которое считывает изображения с видеокамеры и переводит жесты в текст в режиме реального времени. По словам Чеканова, его приложение отличается от существующих аналогов более высокой скоростью работы и точностью перевода.

В будущем разработчик планирует доработать приложение, расширив его функционал. Одной из ключевых задач станет добавление обратного перевода — из текста в жесты, а также из голоса в жесты. Это позволит сделать приложение ещё более универсальным и полезным для пользователей.

Чеканов подчёркивает социальное значение своего проекта. Он считает, что приложение может способствовать инклюзивности и открывать новые возможности для людей с ограниченными возможностями. Кроме того, данное решение может быть интересно специалистам в области обучения жестовому языку, машинного обучения и лингвистам, изучающим эту форму коммуникации.

Приложение уже привлекло внимание и вызвало интерес среди специалистов. Разработчик надеется, что его работа поможет людям лучше понимать друг друга и сделает общение более доступным для всех. В настоящее время проект находится на стадии тестирования, и Чеканов активно работает над его улучшением.