Наушники с камерами позволяют спрашивать ИИ об увиденном

Исследователи Вашингтонского университета создали систему VueBuds, которая позволяет общаться с искусственным интеллектом о происходящем вокруг через обычные беспроводные наушники со встроенными камерами. Разработка представлена 14 апреля на конференции CHI 2026 в Барселоне.

Прототип оснащен миниатюрными камерами размером с рисовое зернышко, которые делают черно-белые снимки низкого разрешения. Изображения передаются по Bluetooth на смартфон или другое устройство, где компактная модель ИИ обрабатывает их и отвечает на вопросы пользователя в течение секунды. Вся обработка данных происходит на устройстве без использования облачных сервисов.

Каждая камера наклонена на 5-10 градусов наружу, что обеспечивает угол обзора от 98 до 108 градусов. При таком расположении возникает слепая зона на расстоянии менее 20 сантиметров от глаз, но исследователи посчитали это незначительным для повседневного использования. Система объединяет изображения с обеих камер в одно, выявляя перекрывающиеся участки.

В тестировании приняли участие 74 человека. VueBuds сравнивали с очками Ray-Ban, которые снимают в высоком разрешении и обрабатывают данные в облаке. Системы показали сопоставимые результаты: участники предпочли переводы VueBuds, а Ray-Ban точнее подсчитывали объекты. Точность перевода и распознавания объектов составила 83-84 процента, определения названий книг — 93 процента.

Команда планирует добавить цветное изображение и обучить специализированные модели ИИ для конкретных задач.