Слуховые аппараты будут читать по губам, анализировать жесты и работать в 5G

Ученые из Вулверхэмптонского и Эдинбургского университетов объявили о разработке самого продвинутого слухового аппарата в мире. Новая система будет считывать жесты рук и мимику собеседника с помощью набора камер, передавать информацию через 5G-сети и обрабатывать данные в облаке за счет алгоритмов на базе ИИ. Проект поддерживается государственным советом EPSRC на сумму в $4,4 млн. в рамках британской программы «Технологии, трансформирующие здравоохранение к 2050 году».

Четырехлетний проект под названием «Когнитивно-вдохновленные мультимодальные слуховые аппараты с поддержкой 5G-IoT» (COG-MHEAR) будет разделен на несколько подпрограмм, посвященных одному продукту. Основная программа будет ориентирована на восприятие человеческой речи в повседневных шумных ситуациях, которые, как правило, требуют как слуховых, так и визуальных ощущений. Слуховые аппараты COG-MHEAR не будут напрягать слуховую сенсорную систему, а предложат имитацию реальных звуков в процессе разговора.

Авторы проекта разработают IoT-систему, которая будет подключать слуховые аппараты к облачной платформе через 5G-сети. Такой подход снизит нагрузку на само устройство и сделает его более энергоэффективным — все вычисления будут производиться в облаке с помощью продвинутых алгоритмов и передаваться обратно с задержкой менее 10 мс. Собранная информация будет анонимизироваться и шифроваться, чтобы сохранить приватность каждой беседы. Инженеры также будут использовать гибкую электронику и специальные антенны, которые уменьшат габариты носимого гаджета — предполагается, что по размеру COG-MHEAR не будет отличаться от обычных слуховых аппаратов.

При этом описанное устройство станет лишь прототипом более совершенного аппарата — в долгосрочной перспективе, когда ученые решат ряд проблем с питанием и вычислительными мощностями, обработка входных данных будет переведена на локальное устройство. Одна из нескольких возможных концепций — интеграция COG-MHEAR по принципу нейроинтерфейса мозг-компьютер.

«Наша идея для 2050 года — выйти за рамки 5G-IoT и Интернета, чтобы создать независимый мозгоподобный чип на кристалле для решения проблем с размерами слухового аппарата, мощностью, связью и кибербезопасностью», — объяснил один из участников COG-MHEAR Ахсан Адил из Вулверхэмптонского университета.

Помимо Вулверхэмптонского и Эдинбургского университетов, в проекте будут участвовать университеты Глазго, Манчестера, Ноттингема, Хериота-Уатта, компании Nokia Bell-Labs и Alpha Data, а также ряд крупных исследовательских центров Великобритании.

Как сообщает The Engineer, около 12 млн. человек в Великобритании страдают от потери слуха и эта проблема обходится Национальной службе здравоохранения в $619 млн. в год. А по прогнозам ВОЗ, в ближайшем будущем ситуация только усугубится — к 2050 году около 2,5 млрд. человек по всему миру будут страдать от тугоухости.