Apple разработает технологию для управления iPhone силой мысли — Synchron ей поможет

Компания Apple сообщила, что к концу текущего года у смартфонов iPhone появятся новые функции доступности для пользователей с ограниченными возможностями. Речь идёт о метках Accessibility Nutrition в App Store и приложении Magnifier для Mac. Также Apple объявила о партнёрстве со стартапом Synchron, который разрабатывает технологии взаимодействия парализованных людей с iPhone с помощью мозговых сигналов.

Источник изображения: 9to5Mac

Как сообщает The Wall Street Journal, Synchron ведёт разработку устройства (имплантата) под названием Stentrode. Компания описывает его как «устройство, похожее на стент, которое имплантируется в вену над двигательной корой мозга» и оснащено электродами, считывающими сигналы мозга. Отмечается, что с 2019 года Stentrode был имплантирован 10 пациентам с нарушениями двигательных функций.

Благодаря партнёрству с Synchron компания Apple планирует углубить разработку интерфейсов мозг-компьютер (BCI) для преобразования мозговых сигналов в команды взаимодействия с интерфейсами iPhone, iPad, Mac и Apple Vision Pro. Имплантат Synchron BCI устанавливается в двигательную кору головного мозга, а именно — на поверхность кровеносного сосуда, с помощью минимально инвазивной эндоваскулярной процедуры, которая включает введение катетера через яремную вену.

Исследователи полагают, что интерфейсы мозг-компьютер, такие как Stentrode и Neuralink, произведут революцию в возможностях людей с заболеваниями, такими как боковой амиотрофический склероз (БАС), взаимодействовать с цифровыми устройствами. В статье Wall Street Journal сообщается о Марке Джексоне (Mark Jackson), пациенте с БАС из Питтсбурга, США, ставшем одним из первых тестировщиков имплантата Stentrode:

«Марк Джексон, один из первых тестировщиков имплантата Stentrode, смог подняться на гору в швейцарских Альпах и почувствовать, как дрожат его ноги. Но Джексон не может встать, и он никогда не был в Швейцарии. Для этого он использовал гарнитуру виртуальной реальности Apple, которая была подключена к его имплантату. Джексон не покидает дома за пределами Питтсбурга, потому что у него БАС. Тем не менее, он учится управлять своим iPhone, iPad и гарнитурой Vision Pro с помощью имплантата Stentrode, соединяющегося с различными операционными системами Apple», — пишет WSJ.

Источник изображения: Synchron

По словам Джексона, технология Synchron «всё ещё находится на ранней стадии разработки» и пока лишена некоторых ключевых функций. Например, отсутствует поддержка имитации перемещения курсора, что значительно замедляет навигацию. Партнёрство Apple с Synchron является важным шагом вперёд в развитии подобных интерфейсов мозг-компьютер. В рамках операционных систем iOS 19 и visionOS 3, которые выйдут этой осенью, Apple внедрит расширенную поддержку BCI с новым протоколом для Switch Control. Это позволит пользователям управлять устройствами без физического взаимодействия.

iOS 19 также принесёт ещё одно значительное нововведение — для людей с БАС и тех, кто находится в группе риска потери речевой функции. В 2023 году в составе iOS 17 компания Apple представила революционную функцию Personal Voice, которая позволяет пользователям создавать и сохранять цифровую копию своего голоса. Первая версия Personal Voice требовала произнести 150 различных фраз для обучения модели машинного обучения Apple. Затем голос обрабатывался системой в течение ночи.

В iOS 19 Apple значительно оптимизирует этот процесс. Теперь пользователям потребуется записать всего 10 различных фраз. Система обработает их менее чем за минуту. Apple утверждает, что новая версия Personal Voice даёт более естественное звучание цифрового голоса и обеспечивает более гармоничный результат.