Дешево и эффективно: новая конструкция составного глаза позволит создавать роботов с суперзрением

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Мнение | Наука и космос

В мире насекомых сложные глаза — не редкость, а скорее правило. Эти удивительные органы зрения позволяют им видеть мир в панораме, молниеносно реагировать на движение и ориентироваться в пространстве с поразительной точностью. Ученые, вдохновленные эффективностью сложных глаз насекомых, уже давно пытаются воссоздать их в искусственных системах, открывая новые горизонты в робототехнике.

Робот с глазами насекомого, вольная интерпретация
Автор: Designer

Однако путь к созданию искусственного аналога оказался тернистым. Традиционные сложные глаза, собранные из массивов микролинз и плоских фотодетекторов, страдают от оптических искажений и ограниченного поля зрения. Попытки использовать гибкую электронику для создания полусферических камер с микролинзами сталкиваются с проблемой механической нестабильности и низкой плотности пикселей.

Революционное решение: нанопроволочный глаз

Недавно группа ученых из Гонконгского университета науки и технологии представила революционное решение — искусственный сложный глаз, основанный на совершенно новых принципах. Вместо микролинз они использовали трехмерно напечатанную матрицу из мельчайших отверстий, расположенных в особой сотовой структуре. Эта структура идеально сочетается с полусферическим фотосенсором, состоящим из плотно упакованных нанопроводов перовскита.

(A) Иллюстрация интегральной структуры PHCE. (B) Вид в разрезе системы PHCE [увеличенный участок серой рамки в (A)]. (C) Поперечное РЭМ-изображение перовскитовых нанопроволок в полусферическом ПАМ [расположено в области, выделенной оранжевой рамкой в (B)]. Масштабная линейка, 1 мкм. На вставке показана фотография полусферического PAM с перовскитом внутри. Масштабная линейка, 5 мм. (D) Макрофотография глаза мухи-разбойника. (E) Фотография бокового вида системы PHCE, установленной на печатных платах. Масштабная линейка, 1 см. (F) Поперечное сечение трех соседних пинхоллов с отмеченными ключевыми параметрами: Δφ, ΔΦ, диаметр (D) и длина (L) каждого пинхола. (G) Моделирование интегрального FoV в зависимости от количества пикселей пинхола с различными значениями ΔΦ. (H) Нормированное распределение интенсивности под разными углами для одиночного отверстия и массива из трех отверстий. На вставке показано рассчитанное значение Δφ.CREDIT: (D): M. ROEM
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

Перовскитные нанопровода, выращенные внутри пористой оксидной мембраны, играют роль светочувствительных элементов, а остаточные нанопровода свинца служат каналами передачи визуальной информации. Инновационная конструкция фотодетектора обеспечивает высокую чувствительность в видимом и ближнем инфракрасном диапазоне, открывая возможности для работы в условиях низкой освещенности.

(A) Спектры фотолюминесценции и (B) XRD-спектры различных перовскитовых нанопроволок в ПАМ. (C) Выравнивание энергетических уровней однопиксельного фотодетектора на основе нанопроволоки MAPbI3. (D) Зависимое от времени переключение при напряжении смещения -5 В с интенсивностью света 0,97 мВт/см2. (E) Зависимость плотности фототока и чувствительности однопиксельного фотодетектора от интенсивности освещения. Самая слабая интенсивность света составляет 2,3 мкВт/см2. (F) Статистическая динамика фототока однопиксельных фотодетекторов без инкапсуляции. В качестве источника света для фотодетекции использовалась галогенная лампа. Точки представляют собой средние значения, а штриховка — SD для шести независимых тестовых образцов.
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

Панорамное зрение и точное позиционирование

Искусственный сложный глаз, созданный гонконгскими учеными, обладает впечатляющим полем зрения в 140 градусов. С помощью системы из двух таких глаз, установленных под углом друг к другу, удалось достичь бинокулярного зрения с полем зрения в 220 градусов. Такая конфигурация позволяет точно определять положение объектов в трехмерном пространстве.

(A) Схематическое изображение измерительной установки. (B) Измеренный FoV для полусферической системы формирования изображений. (C) Изображение кругового узора. (D) Изображение крестообразного и треугольного узоров. На вставках представлены оптические фотографии узоров. В качестве источника света для формирования изображения использовался сходящийся свет.
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

От лаборатории к реальным задачам

Ученые не ограничились лабораторными испытаниями. Они интегрировали искусственный глаз в беспилотный летательный аппарат, который успешно выполнил задачу слежения за движущимся роботом. Этот эксперимент продемонстрировал потенциал технологии для создания сложных систем взаимодействия роботов, открывая дорогу к развитию концепции роевого интеллекта.

(A) Фотография бинокулярной зрительной системы, состоящей из двух PHCE. Масштабная линейка — 1 см. (B) Принцип работы системы бинокулярного зрения. (C) Рассчитанные пространственные позиции и сгенерированная траектория движения движущегося точечного источника света в 3D-пространстве. (D) Принцип работы системы отслеживания движения беспилотника. (E) Фотографии беспилотной системы PHCE. (F — H) Фотографии источника света и дрона во время движения и соответствующие изображения, полученные беспилотной системой PHCE. Вставка обозначает направление движения вперед. F, B, R и L обозначают переднюю, заднюю, правую и левую стороны, соответственно.
Автор: Yu Zhou et al., An ultrawide field-of-view pinhole compound eye using hemispherical nanowire array for robot vision.Sci. Robot.9,eadi8666(2024).DOI:10.1126/scirobotics.adi8666 CC-BY 4.0 Источник: www.science.org

Будущее искусственного зрения

Несмотря на впечатляющие результаты, ученые видят возможности для дальнейшего совершенствования искусственного сложного глаза. Увеличение плотности пикселей, повышение скорости отклика фотодетектора, применение алгоритмов сжатия данных и машинного обучения — эти направления развития обещают сделать искусственное зрение еще более совершенным, приближая его к возможностям биологических систем.

Созданный гонконгскими учеными искусственный сложный глаз — это не просто научная диковинка. Это технологический прорыв, который открывает новые горизонты в робототехнике, позволяя создавать машины, способные видеть мир так же, как это делают насекомые.

Человеческое зрение — комплексный процесс, в котором участвует не только глаз, но и мозг, обрабатывающий визуальную информацию. Могут ли искусственные сложные глаза быть интегрированы с системами искусственного интеллекта для более глубокого анализа визуальной информации? Какие перспективы это открывает?

Интеграция искусственных сложных глаз с системами ИИ — крайне перспективное направление. Это позволит создавать роботов, способных не просто «видеть», но и «понимать» окружающий мир, распознавать объекты, анализировать ситуации, принимать решения. Например, такой робот сможет идентифицировать препятствия на своем пути, распознавать лица людей, прогнозировать движение объектов.

Искусственные сложные глаза — это шаг к созданию роботов, более полно воспринимающих окружающий мир. Как это повлияет на развитие робототехники? К каким изменениям в обществе это может привести?

Роботы с развитым зрением смогут выполнять более сложные задачи, требующие автономности и гибкости. Это приведет к автоматизации многих сфер деятельности, трансформации рынка труда, изменению характера взаимодействия человека и машины. Важно заранее продумать эти изменения, чтобы технологии служили на благо общества.

Сейчас на главной

Новости

Публикации

Обзор Sven PS-1250: портативная колонка 300 Вт с караоке, входом для гитары и 30 часами автономности

Музыка для вечеринки — это всегда компромисс между громкостью, автономностью и удобством. Можно ли обойтись одним устройством, не тянуть за собой усилитель, колонки и отдельный...

Древнейший рисунок в истории: 68 000-летний трафарет «руки с когтями» найден в Индонезии

Новое исследование, опубликованное в журнале Nature, сильно меняет понимание ранней истории человечества. Группа археологов и геохронологов под руководством Ади Агуса Октавианы и Максима Обера...

Жизнь начала зарождаться до рождения Земли: подтверждено спонтанное формирование ее основ в глубоком космосе

Существует термодинамическое противоречие, ставящее под сомнение классические модели возникновения жизни в водной среде. Жидкая вода, являясь универсальным растворителем для биологических...

5 Linux дистрибутивов похожих на Windows

В подборке представлены пять дистрибутивов, оформленных в стиле, знакомом пользователям Windows. Их задача упростить переход на Linux и снизить порог адаптации. В дистрибутивах предусмотрены...