Найти в Дзене

AI-зрение: как нейросети помогают незрячим видеть мир

Кто-то использует нейросети для аналитики, генерации контента и автоматизации бизнеса. Другие продолжают жить в страхе перед технологиями. Но у искусственного интеллекта есть функции и поважнее. Для людей, лишённых способности видеть окружающий мир, AI открывает окно в «нормальную» жизнь. Как это возможно? Рассказываем на примере умных очков, приложений с голосовым управлением и других полезных инструментов. Само сочетание слов в выражении «очки для незрячих» звучит как оксюморон. Но всё дело в предназначении устройства. Вместо оптических линз в умные очки встраивают камеру с искусственным интеллектом, которая сканирует текст, людей и предметы вокруг, а затем распознаёт и озвучивает увиденное через миниатюрные динамики на дужках. Если ещё недавно о таких очках мечтали фантасты, то сегодня они широко представлены на рынке. В продаже есть как специальные очки для слепых (например, от Envision Glasses), так и обычные умные очки от компаний вроде Xiaomi или Google, которые можно настроить
Оглавление
Умные очки с искусственным интеллектом помогают незрячим и слабовидящим в повседневных делах, учёбе и работе.
Умные очки с искусственным интеллектом помогают незрячим и слабовидящим в повседневных делах, учёбе и работе.

Кто-то использует нейросети для аналитики, генерации контента и автоматизации бизнеса. Другие продолжают жить в страхе перед технологиями. Но у искусственного интеллекта есть функции и поважнее. Для людей, лишённых способности видеть окружающий мир, AI открывает окно в «нормальную» жизнь. Как это возможно? Рассказываем на примере умных очков, приложений с голосовым управлением и других полезных инструментов.

«Волшебные» очки для незрячих

Само сочетание слов в выражении «очки для незрячих» звучит как оксюморон. Но всё дело в предназначении устройства. Вместо оптических линз в умные очки встраивают камеру с искусственным интеллектом, которая сканирует текст, людей и предметы вокруг, а затем распознаёт и озвучивает увиденное через миниатюрные динамики на дужках.

Если ещё недавно о таких очках мечтали фантасты, то сегодня они широко представлены на рынке. В продаже есть как специальные очки для слепых (например, от Envision Glasses), так и обычные умные очки от компаний вроде Xiaomi или Google, которые можно настроить под потребности незрячих.

Очки для незрячих подтверждают свою эффективность и в научных испытаниях. Так, в недавнем эксперименте Шанхайского университета незрячим предложили пройти по лабиринту сначала с белой тростью, а затем — в AI-очках. С последним гаджетом участники эксперимента дошли до финишной прямой в четыре раза быстрее!

Почему же, несмотря на доказанную эффективность, такие очки не используют все люди, потерявшие зрение? Всё дело в стоимости. Самые дешёвые модели, разработанные для незрячих и слабовидящих, стоят более $1500 — это около 120 000 ₽

Приложения для смартфона

Смартфон — пожалуй, самый полезный и доступный инструмент для незрячих после белой трости. Даже без зрения им можно пользоваться через программы голосового управления: например, TalkBack и VoiceOver для смартфонов и Jaws — для компьютера.

Самое известное приложение из этой категории разработал незрячий программист Сакиб Шейх. Seeing AI от компании Microsoft решает более трёх миллионов повседневных задач через камеру смартфона:

  • распознаёт местность
  • подсказывает дорогу по картам и GPS-сигналу
  • определяет расположение и размер объектов вокруг
  • описывает внешность и эмоции людей
  • узнаёт знакомых, фото которых вы внесли в память телефона
  • озвучивает надписи — в том числе на этикетках продуктов
  • считает номинал купюр

Практически аналогичны приложению утилиты от других производителей — например, Lookout от Google, Be My Eyes, работающее на базе ChatGPT, или российское приложение «Особый взгляд», которое может озвучивать происходящее на экране, даже если это фильм или сериал.

Некоторые функции доступны владельцам смартфонов и без установки дополнительных приложений. Например, в 2022 году компания Apple дополнила встроенные функции своих смартфонов и планшетов возможностью обнаружения дверей (Door Detection) в системном приложении «Лупа». Новая функция ищет в помещении дверной проём и даёт данные, которые помогут выйти или зайти: расстояние до двери, где расположена ручка и как ею воспользоваться (на себя / от себя).

Другие умные устройства

В дополнение к приложениям на смартфоны существуют тактильные устройства-клавиатуры. Например, Hable One — «пульт», синхронизирующийся с одноимённой утилитой. Правда, стоит гаджет более $200 (~ 16000 ₽). В России такие девайсы можно получить бесплатно — за счёт сертификата ТСР. Как это сделать, мы рассказывали в этой статье.

Не так давно исследователи из Новосибирского государственного технического университета представили миру новую разработку — навигатор с искусственным интеллектом. Для работы с ним нужно скачать приложение, дать доступ к камере и зафиксировать телефон на уровне груди. Даже без доступа к интернету навигатор сможет проанализировать местность, подсказать, куда следует направиться дальше, и предупредить об опасностях на пути.

Нейросети — не необходимость

Нейросети — вовсе не обязательный компонент устройств для незрячих. Без них годами работают счётчики купюр, говорящие часы, компас и другие гаджеты, которые можно найти в нашем интернет-магазине.

Хотите узнать о современных технологиях больше? Задайте свой вопрос в комментариях, и мы будет рады ответить!