Приложение работает на компьютере и на мобильных устройствах в реальном времени
В Новосибирском государственном университете разработали приложение для быстрого и точного перевода жестов в текст, основанный на применении технологий искусственного интеллекта. Об этом сообщили в пресс-службе вуза.
Разработчик приложения Ярослав Чеканов самостоятельно изучил русский жестовый язык, собрал большой массив данных для обучения искусственного интеллекта и сделал тестовое решение на нём. Приложение читает изображение с видеокамеры до момента, пока не будет закончен перевод, который в дальнейшем выводится на экран.
По словам автора разработки, в отличие от существующих аналогов его приложение работает быстрее и выдаёт более точный перевод. В планах разработчика доработать модель, расширить функционал и добавить обратный перевод – из текста в жесты и из голоса в жесты.
Проект способствует инклюзивности и открывает новые возможности взаимодействия для людей с ограниченными возможностями.
Ангелина Саламатова
Фото: kgucri.mszn27.ru