Дешево и эффективно: новая конструкция составного глаза позволит создавать роботов с суперзрением

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Рассуждения | Наука и космос

В мире насекомых сложные глаза — не редкость, а скорее правило. Эти удивительные органы зрения позволяют им видеть мир в панораме, молниеносно реагировать на движение и ориентироваться в пространстве с поразительной точностью. Ученые, вдохновленные эффективностью сложных глаз насекомых, уже давно пытаются воссоздать их в искусственных системах, открывая новые горизонты в робототехнике.

Робот с глазами насекомого, вольная интерпретация
Автор: Designer

Однако путь к созданию искусственного аналога оказался тернистым. Традиционные сложные глаза, собранные из массивов микролинз и плоских фотодетекторов, страдают от оптических искажений и ограниченного поля зрения. Попытки использовать гибкую электронику для создания полусферических камер с микролинзами сталкиваются с проблемой механической нестабильности и низкой плотности пикселей.

Революционное решение: нанопроволочный глаз

Недавно группа ученых из Гонконгского университета науки и технологии представила революционное решение — искусственный сложный глаз, основанный на совершенно новых принципах. Вместо микролинз они использовали трехмерно напечатанную матрицу из мельчайших отверстий, расположенных в особой сотовой структуре. Эта структура идеально сочетается с полусферическим фотосенсором, состоящим из плотно упакованных нанопроводов перовскита.

(A) Иллюстрация интегральной структуры PHCE. (B) Вид в разрезе системы PHCE [увеличенный участок серой рамки в (A)]. (C) Поперечное РЭМ-изображение перовскитовых нанопроволок в полусферическом ПАМ [расположено в области, выделенной оранжевой рамкой в (B)]. Масштабная линейка, 1 мкм. На вставке показана фотография полусферического PAM с перовскитом внутри. Масштабная линейка, 5 мм. (D) Макрофотография глаза мухи-разбойника. (E) Фотография бокового вида системы PHCE, установленной на печатных платах. Масштабная линейка, 1 см. (F) Поперечное сечение трех соседних пинхоллов с отмеченными ключевыми параметрами: Δφ, ΔΦ, диаметр (D) и длина (L) каждого пинхола. (G) Моделирование интегрального FoV в зависимости от количества пикселей пинхола с различными значениями ΔΦ. (H) Нормированное распределение интенсивности под разными углами для одиночного отверстия и массива из трех отверстий. На вставке показано рассчитанное значение Δφ.CREDIT: (D): M. ROEM
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

Перовскитные нанопровода, выращенные внутри пористой оксидной мембраны, играют роль светочувствительных элементов, а остаточные нанопровода свинца служат каналами передачи визуальной информации. Инновационная конструкция фотодетектора обеспечивает высокую чувствительность в видимом и ближнем инфракрасном диапазоне, открывая возможности для работы в условиях низкой освещенности.

(A) Спектры фотолюминесценции и (B) XRD-спектры различных перовскитовых нанопроволок в ПАМ. (C) Выравнивание энергетических уровней однопиксельного фотодетектора на основе нанопроволоки MAPbI3. (D) Зависимое от времени переключение при напряжении смещения -5 В с интенсивностью света 0,97 мВт/см2. (E) Зависимость плотности фототока и чувствительности однопиксельного фотодетектора от интенсивности освещения. Самая слабая интенсивность света составляет 2,3 мкВт/см2. (F) Статистическая динамика фототока однопиксельных фотодетекторов без инкапсуляции. В качестве источника света для фотодетекции использовалась галогенная лампа. Точки представляют собой средние значения, а штриховка — SD для шести независимых тестовых образцов.
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

Панорамное зрение и точное позиционирование

Искусственный сложный глаз, созданный гонконгскими учеными, обладает впечатляющим полем зрения в 140 градусов. С помощью системы из двух таких глаз, установленных под углом друг к другу, удалось достичь бинокулярного зрения с полем зрения в 220 градусов. Такая конфигурация позволяет точно определять положение объектов в трехмерном пространстве.

(A) Схематическое изображение измерительной установки. (B) Измеренный FoV для полусферической системы формирования изображений. (C) Изображение кругового узора. (D) Изображение крестообразного и треугольного узоров. На вставках представлены оптические фотографии узоров. В качестве источника света для формирования изображения использовался сходящийся свет.
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

От лаборатории к реальным задачам

Ученые не ограничились лабораторными испытаниями. Они интегрировали искусственный глаз в беспилотный летательный аппарат, который успешно выполнил задачу слежения за движущимся роботом. Этот эксперимент продемонстрировал потенциал технологии для создания сложных систем взаимодействия роботов, открывая дорогу к развитию концепции роевого интеллекта.

(A) Фотография бинокулярной зрительной системы, состоящей из двух PHCE. Масштабная линейка — 1 см. (B) Принцип работы системы бинокулярного зрения. (C) Рассчитанные пространственные позиции и сгенерированная траектория движения движущегося точечного источника света в 3D-пространстве. (D) Принцип работы системы отслеживания движения беспилотника. (E) Фотографии беспилотной системы PHCE. (F — H) Фотографии источника света и дрона во время движения и соответствующие изображения, полученные беспилотной системой PHCE. Вставка обозначает направление движения вперед. F, B, R и L обозначают переднюю, заднюю, правую и левую стороны, соответственно.
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

Будущее искусственного зрения

Несмотря на впечатляющие результаты, ученые видят возможности для дальнейшего совершенствования искусственного сложного глаза. Увеличение плотности пикселей, повышение скорости отклика фотодетектора, применение алгоритмов сжатия данных и машинного обучения — эти направления развития обещают сделать искусственное зрение еще более совершенным, приближая его к возможностям биологических систем.

Созданный гонконгскими учеными искусственный сложный глаз — это не просто научная диковинка. Это технологический прорыв, который открывает новые горизонты в робототехнике, позволяя создавать машины, способные видеть мир так же, как это делают насекомые.

Человеческое зрение — комплексный процесс, в котором участвует не только глаз, но и мозг, обрабатывающий визуальную информацию. Могут ли искусственные сложные глаза быть интегрированы с системами искусственного интеллекта для более глубокого анализа визуальной информации? Какие перспективы это открывает?

Интеграция искусственных сложных глаз с системами ИИ — крайне перспективное направление. Это позволит создавать роботов, способных не просто «видеть», но и «понимать» окружающий мир, распознавать объекты, анализировать ситуации, принимать решения. Например, такой робот сможет идентифицировать препятствия на своем пути, распознавать лица людей, прогнозировать движение объектов.

Искусственные сложные глаза — это шаг к созданию роботов, более полно воспринимающих окружающий мир. Как это повлияет на развитие робототехники? К каким изменениям в обществе это может привести?

Роботы с развитым зрением смогут выполнять более сложные задачи, требующие автономности и гибкости. Это приведет к автоматизации многих сфер деятельности, трансформации рынка труда, изменению характера взаимодействия человека и машины. Важно заранее продумать эти изменения, чтобы технологии служили на благо общества.

Сейчас на главной

Новости

Публикации

Почему у кошек и других животных глаза светятся в темноте, а у людей – нет?

Представьте: поздний вечер, вы идете по темной улице или лесной тропинке, и вдруг луч вашего фонарика выхватывает из мрака два ярко светящихся огонька. Или, может, вы пытались сфотографировать...

Почему в Африке не живут тигры?

На раскалённых равнинах Африки громыхает рёв льва, мелькают пятна леопарда и сверкают молнии гепарда, но полосатый силуэт тигра здесь не появлялся никогда. Почему самый крупный хищник кошачьего...

Бозон Хиггса есть, а есть ли от него польза? Стоит ли фундаментальная наука тех безумных денег, что на нее тратят?

В 2012 году глубоко под землей, на границе Франции и Швейцарии, произошло событие, которое всколыхнуло мир физики. Внутри 27-километрового кольца Большого адронного коллайдера (БАК) столкнулись...

Оксфордский электрический звонок: тайна, звенящая 185 лет

Представьте себе устройство, которое работает непрерывно почти два века… В коридоре Оксфордского университета, за стеклянным колпаком, находится один из самых загадочных научных экспонатов в...

Чем заменить мясо летом: 7 вкусных и полезных альтернатив, которые понравятся даже мясоедам

Лето — это время лёгкости. Хочется свежего воздуха, коротких маршрутов и… менее тяжёлой еды. Но отказываться от мяса полностью готовы далеко не все. И дело не только в привычке....

Зачем в холодильнике нужен овощной ящик — и как он сохраняет продукты?

Каждый холодильник оснащён специальным ящиком внизу — именно туда привычно отправляются морковь, зелень, капуста и другие овощи. Многие не задумываются, зачем он вообще нужен, считая это...