Южнокорейские учёные из Школы электротехники и электроники Университета Ёнсе разработали концептуально новый гаджет для людей с нарушением слуха. В отличие от предшественников, он не усиливает все звуки вокруг, а вместо этого целенаправленно считывает голос собеседника по его губам.
Гаджет по сути читает по губам собеседника с помощью ИИ, конвертируя увиденное в слова, которые потом звучат в наушнике. В устройстве есть датчики деформации, которые фиксируют движения кожи — сжатия и расширения тканей в процессе артикуляции. Затем подключается алгоритм глубокого обучения, который интерпретирует мимику в слова. На данный момент система может распознавать набор из 100 слов с 88%-й точностью. Как отмечают авторы разработки, на работу тензодатчиков не влияет ни пот, ни кожный жир, а сам гаджет гораздо меньше проектируемых аналогов.
Сама концепция прибора, нацеленного только на чтение по губам, поднимает важный вопрос: неужели в современных реалиях только один звук имеет значение для глухих — и это человеческая речь? Ведь не менее важно слышать и всё остальное, происходящее вокруг.
