Наушники с ИИ научились выделять голос собеседника из общего шума

Исследователи из Вашингтонского университета разработали систему «проактивного слухового помощника» на основе искусственного интеллекта. Технология предназначена для людей с нарушениями слуха и решает проблему так называемого эффекта «коктейльной вечеринки», когда традиционные слуховые аппараты усиливают все голоса в помещении одновременно.

Система работает на готовых наушниках с шумоподавлением, оснащённых бинауральными микрофонами. В её основе лежат два алгоритма искусственного интеллекта. Первый алгоритм фиксирует голос владельца наушников в качестве базового ориентира и анализирует речевые паттерны окружающих. Система отслеживает очерёдность реплик в разговоре: речь собеседника и пользователя практически не накладывается друг на друга, что позволяет определить участника диалога. Второй алгоритм изолирует выявленный голос от фонового шума и усиливает его в наушниках с минимальной задержкой.

Технология способна одновременно обрабатывать диалоги с четырьмя собеседниками. Тестирование проводилось на трёх языках: английском, китайском и японском. Разработкой руководил профессор Шьям Голлакота, ведущим автором исследования выступил докторант Гуйлинь Ху. Результаты работы были представлены на международной конференции по эмпирическим методам обработки естественного языка (EMNLP) в китайском городе Сучжоу. В перспективе исследователи планируют адаптировать технологию для наушников-вкладышей и компактных слуховых аппаратов.