📱Смартфоном теперь можно управлять с помощью взгляда

Исследователи из Университета Карнеги-Меллона разрабатывают инструмент под названием EyeMU, который позволяет пользователям выполнять операции на смартфоне, комбинируя управление взглядом и простые жесты одной руки.

Инженеры усовершенствовали уже существующую программу, позволяющую перемещать курсор по экрану взглядом, с помощью инструмента Face Mesh. Это приложение отслеживает перемещение взгляда пользователя по экрану, и создает карты движений глаз. Затем команда с помощью ИИ разработала предсказатель взгляда, который использует фронтальную камеру смартфона.

В итоге, чтобы открыть приложение, пользователь может достаточно долго просматривать уведомление. Чтобы закрыть, надо качнуть телефоном влево, вправо — чтобы ответить. Чтобы увеличить, надо приподнять телефон вверх. Чтобы отключить управление взглядом, надо отодвинуть устройство вниз.