Добавить в корзинуПозвонить
Найти в Дзене

ИИ научился понимать с первого взгляда: устройство для управления компьютером глазами

Разработчики из Новгородского государственного университета имени Ярослава Мудрого создали две модели искусственного интеллекта, способные обнаруживать лица на изображениях и определять их ключевые точки. Эти технологии станут основой для будущего айтрекера — устройства, которое позволит управлять компьютером с помощью взгляда. Особенно полезным такое решение может стать для людей с ограниченными возможностями. Первая нейросетевая модель отвечает за определение границ лица, а вторая — за точную локализацию таких элементов, как глаза, брови, нос и рот. Вместе они формируют единую систему, которая выделяет лица на изображениях, обрезает нужные фрагменты и извлекает биометрические параметры. Для обучения ИИ использовали общедоступные датасеты, которые были доработаны и расширены. После тренировки модели протестировали и в результате модель, определяющая границы лица, показала совпадение площадей на уровне 87%, а система распознавания ключевых точек — точность с погрешностью менее двух пик

Разработчики из Новгородского государственного университета имени Ярослава Мудрого создали две модели искусственного интеллекта, способные обнаруживать лица на изображениях и определять их ключевые точки. Эти технологии станут основой для будущего айтрекера — устройства, которое позволит управлять компьютером с помощью взгляда. Особенно полезным такое решение может стать для людей с ограниченными возможностями.

Фото: Canva
Фото: Canva

Первая нейросетевая модель отвечает за определение границ лица, а вторая — за точную локализацию таких элементов, как глаза, брови, нос и рот. Вместе они формируют единую систему, которая выделяет лица на изображениях, обрезает нужные фрагменты и извлекает биометрические параметры. Для обучения ИИ использовали общедоступные датасеты, которые были доработаны и расширены. После тренировки модели протестировали и в результате модель, определяющая границы лица, показала совпадение площадей на уровне 87%, а система распознавания ключевых точек — точность с погрешностью менее двух пикселей при разрешении 96x96.

Фото: Canva
Фото: Canva

Работа над айтрекером продолжается: в ближайшее время команда начнёт собирать новый обучающий датасет для третьей модели. Её задача — предсказывать направление взгляда пользователя на экране. Прототип программного обеспечения планируют подготовить к началу 2026 года.

Подписывайтесь на @chudotech

Чудо Техники — мы рассказываем о новейших научных разработках, гаджетах и технологиях, которые способны поменять и уже меняют нашу жизнь. Мы испытываем на себе самые интересные и впечатляющие гаджеты, бытовые приборы, кухонную технику и средства передвижения. Следим за последними достижениями медицины.