В России ученые разработали технологию, которая позволяет управлять промышленными роботами с помощью жестов, объединяя данные камеры и датчика глубины.
Специалисты Донского государственного технического университета вместе с коллегами из МГТУ «Станкин» создали программное решение для бесконтактного управления роботами, сообщили в пресс-службе Минобрнауки России.
В ведомстве отметили, что ученые ДГТУ разработали систему, способную распознавать жесты оператора. Проект реализовали совместно с МГТУ «Станкин» при поддержке гранта Российского научного фонда. Благодаря этому отечественные промышленные манипуляторы смогут выполнять команды так же эффективно, как зарубежные аналоги, но без применения импортных технологий.
Технология работает за счет объединения данных обычной камеры и датчика глубины. Камера фиксирует изображение, а сенсор определяет расстояние до объектов. Такой подход позволяет системе точнее распознавать движения даже при сложных условиях, например при слабом освещении.
На основе полученной информации ученые сформировали специальный дескриптор — набор характеристик, который описывает движения оператора. Система использует алгоритмы компьютерного зрения и нейросети, чтобы распознавать жесты и передавать команды роботизированной технике.
Программа анализирует сигналы с датчиков, определяет жест и передает его на контроллер. Там заранее задано, какое действие должен выполнить робот при конкретной команде. На данный момент система обучена распознавать десять различных жестов.
Разработка может применяться в промышленности — для автоматизации погрузки, сборки, окраски, лазерной обработки и других операций, где человек взаимодействует с роботами. Проект реализовали при поддержке программы «Приоритет 2030» и гранта Российского научного фонда.
Ранее «Краснодарские известия» писали, китайские разработчики показали человекоподобного робота с искусственным интеллектом, который уже используют для работы в опасных условиях.