Футуристические умные очки: перспективная технология, которая изменит восприятие звука для глухих и слабослышащих людей.

Ведутся многообещающие исследования потенциального использования умных очков, оснащённых камерами, искусственным интеллектом (ИИ) и подключением к данным, чтобы помочь глухим людям лучше понимать разговоры в режиме реального времени. Эта инновационная технология не предназначена для замены традиционных слуховых аппаратов, а скорее для их усовершенствования и улучшения и может рассматриваться как эквивалент оснащения умных слуховых аппаратов передовой технологией шумоподавления.

Эта концепция изучается в Университете Хериот-Ватт в Шотландии, где профессор Матени Силатурай, руководитель проекта, объяснил: Как работают эти умные очки?:

«Просто наведите камеру или посмотрите на человека, которого хотите услышать. Даже если два человека говорят одновременно, ИИ использует визуальные подсказки, чтобы распознать голос того, на кого вы смотрите. Эта технология предназначена для поддержки людей со слуховыми аппаратами и тяжёлыми нарушениями зрения, но может быть полезна всем, кто работает в шумных условиях, от нефтяных вышек до больничных палат».

Силатурай отметил, что эта технология наделит слуховые аппараты «сверхвозможностями», и подробно рассказал о принципе их работы и роли искусственного интеллекта в этом процессе. Камера в умных очках отслеживает движения губ говорящего, и, используя технологию чтения по губам и искусственный интеллект, отфильтровывающий фоновый шум и другие посторонние разговоры, «чистая» версия голоса говорящего передается в слуховые аппараты или наушники. Эта технология представляет собой качественный скачок в области помощи людям с нарушениями слуха, открывая новые возможности для улучшения качества их повседневной жизни.

Облачная обработка

Вместо обработки данных непосредственно на устройстве эти умные очки отправляют данные на подключённый смартфон, который, в свою очередь, передаёт их на специализированные облачные серверы. Там передовые технологии искусственного интеллекта применяются для анализа и улучшения данных, а затем финальная версия отправляется пользователю. По словам Силатурая, задержка при передаче данных по 5G-соединению незначительна.

В настоящее время команда использует облачные серверы, расположенные в Швеции, и подчёркивает, что такой подход необходим для предотвращения усталости носимых устройств. Однако здесь возникают проблемы с конфиденциальностью, связанные не только с возможностью записи разговоров в режиме реального времени, но и с целостностью данных при их передаче и анализе в облаке. Данные должны быть защищены от несанкционированного доступа и подделки.

Использование умных очков, оснащённых камерами, наушниками и искусственным интеллектом, для улучшения слуха может показаться слишком сложным решением, но на самом деле это хорошо зарекомендовавший себя подход, известный как аудиовизуальное улучшение речи. Этот подход уже используется в слуховых аппаратах для улучшения звучания голоса говорящего в шумной обстановке, в видеопроизводстве и в слуховых аппаратах как один из видов технологии шумоподавления. Эта технология объединяет звуковую и визуальную информацию для улучшения восприятия речи, особенно в сложных условиях.

Конкуренция и прототипы

Мы уже видели подобные технологии в прошлом. Например, технология преобразования речи в текст была внедрена в ТранскрибироватьGlass В умных очках Vuzix Z100 разговоры преобразуются в текст, который появляется на экране Z100 и который пользователь может прочитать, как субтитры к фильмам. Аудиоочки Nuance Солнцезащитные очки Ray-Ban Meta, сочетающие в себе корректирующие линзы и технологию слуховых аппаратов в одном устройстве, являются одними из Лучшие умные очки, доступные сегодня، Простота использования включает в себя: Для людей с нарушениями слуха и зрения.

Очки TranscribeGlass стоят от 377 долларов США и требуют ежемесячной подписки за 20 долларов США, а стоимость очков Nuance Audio составляет от 1200 долларов США.Профессор Селлатурай отметил, что Цель — расширить возможности для людей с потерей слуха и помочь «дать детям и пожилым людям возможность получить доступ к недорогой поддержке слуха на базе искусственного интеллекта».

Исследователи ведут переговоры с производителями слуховых аппаратов о возможном партнерстве и способах снижения затрат и надеются представить рабочий прототип умных очков к 2026 году. Это многообещающее развитие в области слуховых аппаратов.