Инженер под никнеймом Нехил представил разработку с использованием одноплатного компьютера. Проект энтузиаста реализуется на базе платформы VIAM.
Очки быстро распознают язык жестов и озвучивают полученный перевод за счет функции преобразования текстовых посланий в речевые обороты. Система опирается на ИИ, изучает данные с камеры, которые должны четко записать жесты собеседника. Нейросеть распознает 26 символов американского языка жестов, она работает с минимальной погрешностью.
Камера находится спереди оправы смарт-очков, поэтому для восприятия жестов надо обязательно стоять напротив собеседника, иначе связь не будет установлена. Оправа функционального аксессуара была напечатана на 3D-принтере. Нехил рассказал, что воспользовался моделью компьютерного зрения YOLOv8. Она способна идентифицировать жесты для тех, кто не знает их значение. Для наглядности энтузиаст разместил видеозапись на YouTube длительностью 17 секунд. Система обрабатывает запись трансляции жестов и выдает результаты мгновенно. Смарт-очки направлены на повышение комфорта в общении глухих и немых людей. Люди без ограничения здоровья могут изучать язык жестов и практиковаться, чтобы закрепить изученный материал. Чтобы интерактивные очки с поддержкой искусственного интеллекта исправно работали, надо не забывать своевременно заряжать устройство.
