Технология EgoTouch может превратить ладонь в виртуальный контроллер

Специалисты, представляющие Институт взаимодействия человека и компьютера при Университете Карнеги-Меллона, смогли создать уникальную технологию — EgoTouch, способную превращать ладонь человека в самый настоящий виртуальный контроллер. При помощи него пользователь может взаимодействовать с дополненной и виртуальной реальностями.

Ученые заявили, что хотели предоставить пользователям комфортно обращаться с устройствами дополненной реальности без обращения к дополнительным настройкам и гаджетам. Они в первую очередь ориентировались на исследования в этой области, демонстрировавшие, что людям гораздо комфортнее взаимодействовать с виртуальным интерфейсом на теле, а не использовать жесты в воздухе.

EgoTouch заточен под распознавание теней и деформирования кожи, возникающих из-за касания пальцем ладони. Произошедшие изменения фиксируются устройством при помощи камеры. Полученные данные она быстро переносит на виртуальный интерфейс, сопоставляя их и сравнивая. Таким образом, система способна в точности определять действия человека. При разработке использовалась нейросеть, которую активно обучали нужным алгоритмам и паттернам.

Технология уже была протестирована. Сообщается, что она распознает касания с точностью в 96 процентов, силу касания — в 98 процентов.

Источник: vgtimes