Сегодня 12 ноября 2024
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Hardware

Созданы очки с сонаром, которые переводят беззвучную речь в печатный текст

Аспирант Корнеллского университета (США) Жуйдун Чжан (Ruidong Zhang) разработал оборудованные сонаром очки EchoSpeech, способные «слышать» беззвучную речь своего владельца — достаточно лицевой артикуляции. Очки могут использоваться в качестве стандартного устройства ввода.

 Жуйдун Чжан (Ruidong Zhang). Источник изображения: ruidongzhang.com

Жуйдун Чжан (Ruidong Zhang). Источник изображения: ruidongzhang.com

Новый проект автора основан на предыдущей разработке, в рамках которой он установил камеры на беспроводные наушники. Формат очков оказался для этих целей более удобным: пользователю не нужно смотреть в камеру или вставлять что-то в ухо. Данные с установленных на очки динамиков и микрофонов по беспроводному каналу передаются на смартфон, где обрабатываются алгоритмами искусственного интеллекта.

При первом использовании требуется калибровка EchoSpeech, позволяющая ИИ изучить особенности мимики пользователя — достаточно всего нескольких минут, за которые человеку предлагается, например, зачитать несколько чисел. Когда настройка завершена, точность срабатывания системы достигает 95 %. Использование смартфона для обработки данных позволяет очкам оставаться компактными и ненавязчивыми, обеспечивать им до 10 часов автономной работы и гарантировать, что вся информация остаётся на телефоне — его производительности достаточно для локальной обработки всех данных.

На практике у EchoSpeech может быть множество самых разных применений: управление программами на ПК, беззвучное управление музыкальным проигрывателем без рук, возможность диктовки сообщения на громком концерте, или даже совместная работа с голосовым синтезатором для людей с нарушениями речи — они снова заговорят. Сейчас авторы проекта рассматривают возможности вывода технологий на рынок при участии действующей в Корнеллском университете программы финансирования.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Вечерний 3DNews
Каждый будний вечер мы рассылаем сводку новостей без белиберды и рекламы. Две минуты на чтение — и вы в курсе главных событий.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
GSC Game World объявила окончательные системные требования S.T.A.L.K.E.R. 2: Heart of Chornobyl — GTX 1060 всё ещё в «минималках» 35 мин.
Заждались: Farming Simulator 25 вышла в Steam и сразу же установила новый рекорд для серии 2 ч.
Создатели Stellar Blade подтвердили планы на ПК-версию — объявлена дата выхода фоторежима и дополнения по Nier: Automata 3 ч.
Северокорейские хакеры научились обходить защиту macOS и захватывать удалённый доступ к Mac 3 ч.
Apple Intelligence стал источником абсурдных, смешных и пугающих обобщений уведомлений 4 ч.
Третье дополнение к Atomic Heart выйдет «совсем скоро» — новые скриншоты и подробности 4 ч.
Nvidia App вышло из беты и вскоре полностью заменит GeForce Experience 4 ч.
Nvidia выпустила драйвер с поддержкой S.T.A.L.K.E.R. 2: Heart of Chornobyl и Microsoft Flight Simulator 2024 5 ч.
Французская и немецкая поисковые системы объединились против Google 6 ч.
Владельцы Steam Deck провели в Baldur’s Gate 3 более 17 миллионов часов, а покупатели игры нашлись в Ватикане 8 ч.