Российские ученые презентовали технологию стереозрения для роботов
Un-ViTAStereo определяет расстояние до объекта точно и без дорогостоящего оборудования
Учёные МФТИ в составе международного коллектива разработали уникальную технологию стереозрения для роботов, которая поможет им видеть мир в объёмном формате и без слепых зон. Об этом сообщает пресс-служба вуза. Разработка точна даже в тумане, густой листве или перед гладкими стенами. Применять её можно на производстве и для беспилотной техники.
В вузе пояснили, что роботы определяют расстояние до предмета по тому же принципу, что и человек. Видеокамера работает как глаз, алгоритмы – как мозг, который определяет удалённость предмета. Однако если робот видит белую стену или повторяющийся узор, ему сложно сориентироваться.
Подсказки для нейросети
Новый фреймворк для обучения нейросетей решает эту проблему. Он становится своего рода наставником, который может оценить относительную глубину с помощью одного изображения. Depth Anything V2 распознаёт тени, перспективу и перекрытия объектов. Он передаёт подсказки стереосистеме, на которых нейросеть обучается и становится точнее.
Система работает в три этапа – проверяет каждый пиксель на соответствие подсказкам наставника, затем задаёт границы по установленным «маякам» и двигает их в нужное место. И наконец алгоритм «Двойная функция потерь сглаживания диспаратности DDS» помогает построить контуры предмета. Тестирование уже показало впечатляющие результаты.
Учёные планируют обучить Un-ViTAStereo разным средам – городской, заводской и другим.
