Учёные разработали новый алгоритм стереозрения для роботов и беспилотных автомобилей

Учёные из МФТИ и международных исследовательских центров разработали новую технологию стереозрения Un-ViTAStereo, позволяющую роботам и беспилотным автомобилям видеть мир объёмно и без слепых зон. По информации пресс-службы МФТИ, данный алгоритм определяет расстояние до объектов без использования дорогостоящих лидаров и ручной разметки, что делает его более доступным и универсальным.

Алгоритм Un-ViTAStereo обучается с помощью модели Depth Anything V2, которая оценивает относительную глубину объектов по одному изображению, распознавая тени, перспективу и перекрытия. Данная технология позволяет отбирать только те предсказания, которые согласуются с подсказками «наставника», что значительно повышает точность работы системы.

Система функционирует в три этапа: сначала происходит проверка каждого пикселя на соответствие подсказкам, затем осуществляется поиск «зелёных» соседей для «красных» точек, и в заключение строятся контуры при помощи функции сглаживания диспаратности. В результате доля грубых ошибок на тестах беспилотников KITTI 2015 уменьшилась до 5%, что на 23% меньше опасных ошибок в определении расстояний до объектов.

Специалисты МФТИ подчеркнули, что текущая версия Un-ViTAStereo является лишь началом. В дальнейшем учёные планируют создать самообучающуюся нейросеть, которая сможет адаптироваться к различным условиям, а также использовать точные измерения лидаров для повышения точности. Это открывает широкие перспективы для улучшения безопасности и функциональности автономных систем.

Стереосистемы беспилотных автомобилей и роботов работают по аналогии с человеческим зрением: две камеры передают изображения, а алгоритмы сопоставляют их, чтобы построить карту глубины. Однако традиционные алгоритмы сталкиваются с проблемами, например, перед гладкими стенами или в условиях густой листвы и тумана. Благодаря новейшей разработке это ограничение может быть преодолено.

Учёные из МФТИ и международных исследовательских центров разработали новую технологию стереозрения Un-ViTAStereo, позволяющую роботам и беспилотным автомобилям видеть мир объёмно и без слепых зон. По информации пресс-службы МФТИ, данный алгоритм определяет расстояние до объектов без использования дорогостоящих лидаров и ручной разметки, что делает его более доступным и универсальным.

Алгоритм Un-ViTAStereo обучается с помощью модели Depth Anything V2, которая оценивает относительную глубину объектов по одному изображению, распознавая тени, перспективу и перекрытия. Данная технология позволяет отбирать только те предсказания, которые согласуются с подсказками «наставника», что значительно повышает точность работы системы.

Система функционирует в три этапа: сначала происходит проверка каждого пикселя на соответствие подсказкам, затем осуществляется поиск «зелёных» соседей для «красных» точек, и в заключение строятся контуры при помощи функции сглаживания диспаратности. В результате доля грубых ошибок на тестах беспилотников KITTI 2015 уменьшилась до 5%, что на 23% меньше опасных ошибок в определении расстояний до объектов.

Специалисты МФТИ подчеркнули, что текущая версия Un-ViTAStereo является лишь началом. В дальнейшем учёные планируют создать самообучающуюся нейросеть, которая сможет адаптироваться к различным условиям, а также использовать точные измерения лидаров для повышения точности. Это открывает широкие перспективы для улучшения безопасности и функциональности автономных систем.

Стереосистемы беспилотных автомобилей и роботов работают по аналогии с человеческим зрением: две камеры передают изображения, а алгоритмы сопоставляют их, чтобы построить карту глубины. Однако традиционные алгоритмы сталкиваются с проблемами, например, перед гладкими стенами или в условиях густой листвы и тумана. Благодаря новейшей разработке это ограничение может быть преодолено.

]]>