Как видеть сквозь стены с минимумом вложений: новая технология, которая превращает научную фантастику в реальность

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Мнение | Наука и космос

Вы когда-нибудь мечтали о том, чтобы иметь суперзрение, чтобы видеть то, что скрыто от взгляда обычного человека? Проникать взглядом за стены, двери, здания или другие препятствия? Если да, то вы не одиноки. Эта идея вдохновляла писателей, режиссеров и изобретателей на протяжении десятилетий. И теперь она становится реальностью.

Группа ученых из Университета Южной Флориды (USF) разработала алгоритм, который позволяет реконструировать трехмерную картину скрытой сцены, используя всего лишь одну фотографию.

Эта технология называется 3D-реконструкцией скрытых сцен и основана на использовании обычной цифровой камеры, которая может захватить слабые тени, брошенные на близлежащие поверхности объектами, находящимися за препятствиями. Эти тени содержат информацию о форме, цвете и расположении скрытых объектов, которую алгоритм, разработанный ассистентом профессора компьютерных наук и инженерии USF Джоном Мюррей-Брюсом и его докторантом Робинсоном Чайковским, может использовать для создания высокоточной 3D-модели скрытой сцены.

Сценарий визуализации NLOS с двусторонним разрешением и представление скрытой сцены. Изображение сценария визуализации и предлагаемой сферической координаты проекции высоты. С началом координат в верхнем левом углу дверной коробки скрытая точка сцены идентифицируется по дальности ρ, азимуту θ и ψ проекции высоты. b Показывает ψ проекции высоты в предлагаемой сферической системе координат проекции высоты, она представляет собой проекцию условного угла места сферических координат на плоскость xz и такова, что tan(ψ)=tan(φ)sec(θ). (Для наглядности ось Z перевернута от (a) к направлению вверх.) c Элементное представление поверхности, полученное из 10 равных делений осей азимута и проекции высоты с фиксированным диапазоном, ρ. Красной точкой обозначен пример элемента поверхности, центр которого находится в точке (ρ, θ, ψ) = (1, 11 π/40, 13 π/40), а угловые экстенты равныπ/20 по азимуту и проекции по углу места. d, e Изобразите изменения в наблюдаемом измерении, вызванные перемещением скрытого точечного источника (красной точки) из своего положения в (d) в новое положение в (e) таким образом, что его дальность и прогнозируемый угол места остаются фиксированными, а изменяется только его азимутальный угол. Свет от скрытой точки сцены перекрывается краями дверного проема, создавая освещенную область трапециевидной формы на потолке. Наблюдение на рисунке (d) имеет освещенную трапециевидную область, наклонный край которой круче, чем у (e), поскольку азимутальный угол точечного источника увеличивается от (d) до (e); В остальном высоты освещенных частей трапеции в (d) и (e) равны, поскольку угол проекции не изменяется
Автор: Nature Communications (2024) DOI: 10.1038/s41467-024-45397-7 Источник: www.nature.com

Исследование Чайковского и Мюррей-Брюса было опубликовано в журнале Nature Communications и является первой в своем роде успешной 3D реконструкцией скрытой сцены с использованием обычной камеры. Ранее исследователи могли создавать только грубые 2D-реконструкции небольших пространств, или требовали специализированного, дорогостоящего оборудования для 3D-визуализации.

«Наша работа достигает аналогичного результата, при минимальных требованиях», — сказал Чайковский. «Вам больше не нужно тратить миллион долларов на оборудование для этого».

Конечно, алгоритм еще не совершенен и требует дальнейшего улучшения. Сейчас он работает достаточно медленно и неточно, и не может справиться со сложными сценами, с множеством движущихся объектов или переменным освещением (кстати исходный код есть в открытом доступе). Поэтому ученые планируют продолжать свои исследования, чтобы повысить скорость и точность алгоритма, а также расширить спектр его применения в будущем. Они ожидают, что через 10-20 лет технология будет достаточно надежной, чтобы быть внедренной в различные области жизни.

Это уникальное достижение в области компьютерного зрения, которое открывает новые возможности для различных сфер деятельности. Например, такая технология может помочь предотвратить автомобильные катастрофы, если водитель сможет заранее увидеть опасность, которая подстерегает его за поворотом. Также она может быть полезна для правоохранительных органов, которые могут оценить ситуацию с заложниками, не рискуя своей жизнью. Кроме того, она может способствовать поиску и спасению людей, которые оказались в затруднительном положении, например, под завалами или в пещерах.

1 комментарий

P
Забавная работка. Но не надо скромничать, автор. Если ещё возможно, добавь скриншоты из Supplementary information, там примеры работы алгоритма для разных объектов есть. До «видеть сквозь стены» ещё как до Шанхая пешком, до применений в реальных условиях ещё дальше, но как фундаментальная работа про сферических коней в вакууме, в общем, неплохо.

Добавить комментарий

Сейчас на главной

Новости

Публикации

Почему шерсть мериноса так ценится? Греет, не колется и не пахнет — научный взгляд на природные технологии

Несмотря на появление высокотехнологичных синтетических материалов, натуральная шерсть мериноса остается одним из самых востребованных видов сырья в производстве функциональной одежды. Ее...

Могла ли Земля случайно занести жизнь на спутник Юпитера? Как миллионы наших бактерий ежесекундно падают на Европу

Поиски внеземной жизни сосредоточены на ледяных спутниках планет-гигантов. Европа, один из крупнейших спутников Юпитера, обладает глобальным океаном жидкой воды, который расположен под...

Поджарит с корочкой: обзор аэрогриля Dreame Tasti PT60 с двумя чашами в комплекте

Люблю готовить с аппетитной корочкой, но не люблю тратить на это время. В этом меня выручает аэрогриль Tasti PT60 от Dreame. Его особенность — сразу две стеклянные чаши в комплекте и...

FiiO JadeAudio Level 1 — компактно, функционально и мощно — обзор 600-ваттного усилителя для акустики

Насколько я знаю, до Level 1 у компании FiiO еще не было усилителей для акустики. У них есть несколько серьезных настольных усилителей для наушников и активная акустика, а вот усилителей для...

Как мальтийцы полвека получают прибыль от декораций к провальному фильму

Далеко не каждый фильм становится культовым. Как показывает практика, часто деньги вливаются в ленту, которой не суждено даже окупиться. И на позорном кассовом провале такие фильмы заканчиваются,...

Можно ли снести дом на своем участке и построить новый

Многие владельцы домов сталкиваются с ситуацией, когда старое жилье приходит в негодность или перестает соответствовать потребностям семьи. Но можно ли полностью снести существующий дом на...