Гуманоидные роботы научились безопаснее передвигаться благодаря технологии 3D-зрения

Американская компания по компьютерному зрению RealSense представила на выставке NVIDIA GTC в Калифорнии технологию, которая делает гуманоидных роботов безопаснее и надёжнее в реальных условиях. Совместно с китайской фирмой LimX Dynamics инженеры показали, как продвинутое 3D-зрение и система визуального SLAM (одновременная локализация и построение карты) позволяют роботам точнее ориентироваться, строить карту пространства и передвигаться без риска столкновений.

Раньше двуногие и четвероногие роботы часто зависели от дистанционного управления или работали только в строго контролируемых зонах. Причина проста: в отличие от колёсных платформ, шагающие роботы движутся в полном трёхмерном пространстве. Им нужно постоянно контролировать положение стоп, оценивать уклоны, края и препятствия. Обычные методы вроде одометрии по энкодерам или двумерных лидаров, которые хорошо работают у роботов-пылесосов, здесь уже не справляются.

Новая система от RealSense решает эту задачу. Она объединяет плотную карту глубины с алгоритмами визуальной одометрии NVIDIA и cuVSLAM. В результате робот получает детальное понимание окружения: видит ступеньки, бордюры, перепады высот и движущиеся объекты. Это позволяет ему планировать маршрут на ходу, обходить людей и оборудование, уверенно шагать по неровной поверхности.

Обучение проходило в виртуальной среде NVIDIA Isaac Lab. Инженеры LimX Dynamics использовали метод обучения с подкреплением: робот сначала отрабатывал движения и принятие решений в симуляции, а уже потом выходил в реальный мир. Такой подход «сначала симуляция» помог сократить разрыв между цифровой тренировкой и физической работой, ускорил разработку и снизил риски при тестировании.

Руководитель RealSense Надав Орбах отметил, что для безопасной работы рядом с людьми восприятие робота должно выходить за рамки простых сенсоров. По его словам, система зрения должна работать как зрительная кора мозга — обеспечивать точную локализацию, избегать столкновений, понимать рельеф местности и гарантировать стабильные, предсказуемые движения в неструктурированной среде.

Технология RealSense, которая разрабатывалась более десяти лет, теперь становится стандартом для современных роботов. Глубинные камеры и программные инструменты компании помогают инженерам быстрее создавать и тестировать новые модели, приближая эру, когда гуманоиды станут повседневными помощниками в домах, на заводах и в общественных пространствах.

Источник: interestingengineering