Сегодня 13 марта 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Hardware

Учёные с помощью ИИ в четыре раза ускорили преобразование мыслей в речь через нейроинтерфейс

В журнале Nature вышли две статьи, в которых учёные рассказали о новых методиках трансляции мыслей пациентов с поражениями мозга в речь и эмоции. Преобразование мозговой активности в текст и голосовое общение происходит с помощью алгоритма машинного обучения. Учёным удалось увеличить скорость преобразования почти в четыре раза с 18 слов в минуту до 78. Это ниже среднего для обычного разговора темпа в 160 слов в минуту, но кратно быстрее, чем было до этого.

 Источник изображений: Noah Berger/UCSF

Источник изображений: Noah Berger/UCSF

Нейродегенеративные заболевания, инсульты или травмы способны лишить человека речи разными способами, но один из них достаточно легко поддаётся исправлению. Современные технологии позволяют создать мостик между здоровыми участками мозга, отвечающими за речь или мысленное произношение, и мышцами, управляющими мимикой и позволяющими говорить. Естественный канал коммуникации между мышцами и мозгом может быть разорван в случае болезни или травмы, и тогда на помощь приходит интерфейс человек-компьютер и обучаемый алгоритм.

В мозг пациента встраивается датчик или несколько датчиков с электродами, входящими в зоны активности мозга человека, ответственные за произношение и речь (хотя учёные пока не до конца понимают, какие это зоны). В одном случае, например, учёные установили на речевую область сенсомоторной коры и на область верхней височной извилины женщины после инсульта 253 электрода. После болезни она не могла говорить и даже печатать.

В течение нескольких недель ИИ обучался на примере произношения пациенткой 1024 слов из специально подобранного словаря. Для упрощения работы алгоритма он разбивал все слова на фонемы, которых было всего 39. Затем словарный запас женщины был расширен до 125 тыс. слов. Машинный алгоритм смог распознавать мысленное произношение женщины с ошибками на уровне 25 %, но со скоростью до 78 слов в минуту.

Алгоритм также научили распознавать эмоции пациентки — горе, радость, удивление. Наконец, используя старую видеозапись женщины, учёные создали её компьютерный образ — аватар — и заставили его транслировать текстовые сообщения в голосовые. По сути, они вернули пациентке возможность разговаривать.

Сегодня подобные процедуры восстановления сопряжены с длительным обучением ИИ и необходимостью быть постоянно подключённым к компьютеру. Учёные из Калифорнийского университета в Сан-Франциско (UCSF) и Калифорнийского университета в Беркли, которые реализовали представленную методику, теперь работают над беспроводными вариантами транслятора. Когда-нибудь это повысит социальную вовлечённость людей с подобными медицинскими проблемами.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Авторы амбициозного симулятора жизни Inzoi раскрыли окончательные системные требования и оптимальные настройки графики 6 ч.
Niantic продаст Pokemon Go и остальной игровой бизнес создателю Monopoly Go и Stumble Guys за 3,5 миллиарда долларов 10 ч.
Французские издатели подали в суд на Meta за обучение ИИ на их материалах 11 ч.
Северокорейских хакеров обвинили в публикации вредоносов в Google Play 11 ч.
Первый руководитель игрового направления Netflix покинул компанию после перехода в отдел генеративного ИИ 12 ч.
Microsoft снова сломала Windows: с очередным обновлением USB-принтеры стали печатать произвольный текст 13 ч.
Microsoft добавила сочетание клавиш для быстрого запуска голосового чата с Copilot 13 ч.
Прибыль российского ИКТ-сектора за 2024 год выросла до 1,17 триллионов рублей 14 ч.
Electronic Arts добавила в новую Skate микротранзакции ещё до выхода игры в ранний доступ 14 ч.
Из раннего доступа Steam скоро выйдет Vivat Slovakia — экшен с открытым миром в духе GTA, но про Словакию в разгар «лихих девяностых» 16 ч.
Новая статья: Обзор процессорного кулера PentaWave Z06D SRB: эффективнее, удобнее, дешевле 4 ч.
Microsoft не выпустит портативную Xbox в этом году, но это может сделать Asus 4 ч.
Пока акции Tesla летят вниз, стоимость частных компаний Маска выросла на 45 % после выборов президента США 5 ч.
Новая статья: Обзор телевизора Digma Pro OLED 55M 5 ч.
Пионер в сфере роботов-пылесосов iRobot признался, что скоро может прекратить существование 7 ч.
Израильский стартап BeeFree Agro выпустил дронов-пастухов с ИИ для выпаса скота 7 ч.
«Это Святой Грааль квантовых вычислений» — D-Wave достигла квантового превосходства 8 ч.
Imec получит лучшие инструменты ASML для разработки техпроцессов тоньше 2 нм 9 ч.
Google DeepMind дала роботам ИИ, с которым они могут выполнять сложные задания без предварительного обучения 9 ч.
Евросоюз потратит €240 млн на создание трёх RISC-V чиплетов для суперкомпьютеров в рамках проекта DARE 9 ч.