Футуристические умные очки: перспективная технология, которая изменит восприятие звука для глухих и слабослышащих людей.

Ведутся многообещающие исследования потенциального использования умных очков, оснащённых камерами, искусственным интеллектом (ИИ) и подключением к данным, чтобы помочь глухим людям лучше понимать разговоры в режиме реального времени. Эта инновационная технология не предназначена для замены традиционных слуховых аппаратов, а скорее для их усовершенствования и улучшения и может рассматриваться как эквивалент оснащения умных слуховых аппаратов передовой технологией шумоподавления.

Эта концепция изучается в Университете Хериот-Уотт в Шотландии, где профессор Матени Селатурай, руководитель проекта, объяснил, как работают эти умные очки :

«Просто наведите камеру или посмотрите на человека, которого хотите услышать. Даже если два человека говорят одновременно, ИИ использует визуальные подсказки, чтобы распознать голос того, на кого вы смотрите. Эта технология предназначена для поддержки людей со слуховыми аппаратами и тяжёлыми нарушениями зрения, но может быть полезна всем, кто работает в шумных условиях, от нефтяных вышек до больничных палат».

Силатурай отметил, что эта технология наделит слуховые аппараты «сверхвозможностями», и подробно рассказал о принципе их работы и роли искусственного интеллекта в этом процессе. Камера в умных очках отслеживает движения губ говорящего, и, используя технологию чтения по губам и искусственный интеллект, отфильтровывающий фоновый шум и другие посторонние разговоры, «чистая» версия голоса говорящего передается в слуховые аппараты или наушники. Эта технология представляет собой качественный скачок в области помощи людям с нарушениями слуха, открывая новые возможности для улучшения качества их повседневной жизни.

Облачная обработка

Вместо обработки данных непосредственно на устройстве эти умные очки отправляют данные на подключённый смартфон, который, в свою очередь, передаёт их на специализированные облачные серверы. Там передовые технологии искусственного интеллекта применяются для анализа и улучшения данных, а затем финальная версия отправляется пользователю. По словам Силатурая, задержка при передаче данных по 5G-соединению незначительна.

В настоящее время команда использует облачные серверы, расположенные в Швеции, и подчёркивает, что такой подход необходим для предотвращения усталости носимых устройств. Однако здесь возникают проблемы с конфиденциальностью, связанные не только с возможностью записи разговоров в режиме реального времени, но и с целостностью данных при их передаче и анализе в облаке. Данные должны быть защищены от несанкционированного доступа и подделки.

Использование умных очков, оснащённых камерами, наушниками и искусственным интеллектом, для улучшения слуха может показаться слишком сложным решением, но на самом деле это хорошо зарекомендовавший себя подход, известный как аудиовизуальное улучшение речи. Этот подход уже используется в слуховых аппаратах для улучшения звучания голоса говорящего в шумной обстановке, в видеопроизводстве и в слуховых аппаратах как один из видов технологии шумоподавления. Эта технология объединяет звуковую и визуальную информацию для улучшения восприятия речи, особенно в сложных условиях.

Конкуренция и прототипы

Подобные технологии мы уже видели раньше. Например, технология преобразования речи в текст от TranscribeGlass интегрирована в умные очки Vuzix Z100, где разговоры преобразуются в текст, который отображается на экране Z100 для чтения пользователем, подобно субтитрам к фильмам. Очки Nuance Audio также сочетают в себе корректирующие линзы и технологию слухового аппарата в одном устройстве. А очки Ray-Ban Meta, одни из лучших умных очков на сегодняшний день , включают функции, делающие их более доступными для людей с нарушениями слуха и зрения.

Цены на TranscribeGlass начинаются от 377 долларов и требуют ежемесячной подписки в размере 20 долларов, в то время как очки Nuance Audio стоят от 1200 долларов. Профессор Селлатурай отметил , что цель состоит в том, чтобы расширить возможности для людей с нарушениями слуха и помочь «предоставить детям и пожилым людям доступ к доступной поддержке слуха на основе искусственного интеллекта».

Исследователи ведут переговоры с производителями слуховых аппаратов о возможном партнерстве и способах снижения затрат и надеются представить рабочий прототип умных очков к 2026 году. Это многообещающее развитие в области слуховых аппаратов.