Сегодня 19 мая 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → инвалид

Apple представила ИИ-функции для инвалидов — включая управление коляской взглядом

Apple объявила об улучшении эффективности многих функций доступности в своих продуктах. Доработкам подверглись такие инструменты, как VoiceOver, «Лупа», голосовое управление и программа для чтения с ограниченными возможностями. Владельцы инвалидных колясок с электроприводом смогут управлять ими взглядом при помощи гарнитуры Vision Pro. Компания заверила, что добавление перечисленных возможностей ИИ не пошло в ущерб конфиденциальности пользователей.

По словам старшего директора Apple по глобальной политике и инициативам в области доступности Сары Херрлингер (Sarah Herrlinger), компания «предлагает новые, интуитивно понятные варианты ввода, исследования и персонализации, разработанные для защиты конфиденциальности пользователей на каждом этапе».

VoiceOver и «Лупа» помогают пользователям с нарушениями зрения понимать как информацию на экране, так и окружающую обстановку. Функция Image Explorer в VoiceOver использует Apple Intelligence для предоставления более подробных описаний изображений по всей системе, включая фотографии, отсканированные счета, личные записи и другой визуальный контент.

Благодаря обновлениям функции Live Recognition, пользователи VoiceOver могут нажать кнопку Action на iPhone, чтобы быстро задать вопрос о том, что находится в видоискателе камеры, и получить подробный ответ. «Лупа» теперь также работает с кнопкой Action, поэтому пользователи могут быстро задавать вопросы и получать ответы.

 Источник изображений: unsplash.com

Источник изображений: unsplash.com

Управлять самим приложением можно с помощью голосовых команд, таких как «увеличить» или «включить фонарик». Раньше голосовое управление требовало от пользователей запоминания точных слов и фраз. Apple заявляет, что благодаря ИИ эта функция теперь позволяет использовать естественный язык. Возможность «говорить то, что вы видите» подходит для навигации по любому приложению, включая программные продукты с визуальной структурой, такие как Apple Maps или «Файлы», используя интуитивно понятный язык.

«Чтение для людей с ограниченными возможностями» — это персонализированный режим чтения для пользователей с широким спектром нарушений, от дислексии до слабого зрения. Функция теперь работает с более сложными исходными материалами, такими как научные статьи, обрабатывая текст с несколькими столбцами, изображениями и таблицами. Краткие обзоры по запросу позволяют читателям получить общее представление о статье, прежде чем углубляться в детали.

Благодаря новой встроенной функции перевода пользователи могут читать текст на своём родном языке, сохраняя при этом оригинальные форматирование, шрифт и цвета. Любое видео можно дополнить субтитрами, сгенерированными ИИ. Субтитры создаются непосредственно на устройстве для сохранения конфиденциальности.

Не все пользователи инвалидных кресел с электроприводом обладают достаточной подвижностью для использования джойстика. Теперь они смогут использовать управление взглядом при помощи гарнитуры Vision Pro. Отслеживание взгляда не требует частой перекалибровки и работает в различных условиях освещения.

 Источник изображения: The Verge

На начальном этапе эта возможность будет доступна в США с системами привода колясок Tolt и LUCI, с поддержкой как Bluetooth, так и проводного подключения. В дальнейшем Apple пообещала добавить поддержку других моделей инвалидных колясок.

 Источник изображений: unsplash.com

Apple перечислила ещё ряд дополнительных улучшений доступности:

  • Функция распознавания движений в автомобиле (Vehicle Motion Cues) появится в visionOS, что поможет уменьшить укачивание у людей, использующих Apple Vision Pro в качестве пассажира в движущемся транспортном средстве.
  • Vision Pro будет поддерживать жесты лица для выполнения касаний и системных действий, а также новый способ выбора элементов глазами при использовании функции Dwell Control.
  • Функция Touch Accommodations предоставляет новый способ персонализации настроек в iOS и iPadOS.
  • Слуховые аппараты Made for iPhone будут более надёжно сопрягаться и переключаться между устройствами Apple, будет улучшен процесс настройки в iOS, iPadOS, macOS и visionOS.
  • В tvOS появится поддержка увеличенного текста, поэтому пользователи с ослабленным зрением смогут увеличить размер текста на экране для удобства чтения.
  • Функция распознавания имён (Name Recognition), которая может уведомлять глухих или слабослышащих пользователей, если кто-то произносит их имя, теперь работает более чем на 50 языках мира.
  • Для разработчиков приложений перевода языка жестов новый API позволяет добавлять переводчика к текущему видеозвонку FaceTime.
  • Пользователи, испытывающие трудности с использованием традиционных контроллеров, могут подключить контроллер Sony Access к устройствам iOS, iPadOS и macOS. Можно настроить джойстик, девять встроенных кнопок и до четырёх дополнительных внешних кнопок или специальных переключателей для персонализации расположения элементов управления. Также можно объединить два контроллера для индивидуальной настройки игрового процесса.

«Подход Apple к доступности не похож ни на один другой, — заявил генеральный директор Apple Тим Кук (Tim Cook). — Теперь, с Apple Intelligence, мы внедряем новые мощные возможности в наши функции доступности, сохраняя при этом нашу основополагающую приверженность принципу конфиденциальности на этапе проектирования».

Представлены смарт-очки Ally Solos для слабовидящих — встроенный ИИ будет читать тексты и помогать в делах

Компания Envision, специализирующаяся на технологиях, помогающих людям с ограниченными возможностями, в партнёрстве с производителем очков Solos выпустила умные очки Ally Solos для слепых и слабовидящих пользователей. Очки могут читать и переводить текст, описывать окружающую обстановку, осуществлять поиск в интернете и распознавать людей, предметы и знаки, передавая информацию пользователю через динамики открытого типа, встроенные в дужки.

 Источник изображений: Envision

Источник изображений: Envision

Умные очки Ally Solos разработаны на базе модели Solos AirGo Vision, выпущенной в декабре 2024 года. Главным отличием Ally Solos является замена встроенного в AirGo Vision ИИ-помощника на базе GPT-4o на Envision Ally. ИИ-помощник от Envision, по утверждению производителя, использует комбинацию базовых моделей ИИ, включая Llama от Meta✴, ChatGPT от OpenAI, Gemini от Google и Perplexity. Встроенные в умные очки Ally Solos функции искусственного интеллекта работают при подключении по Bluetooth к приложению Ally для iOS или Android.

Очки имеют высокий уровень защиты от пыли и воды по стандарту IP67 и оснащены заряжаемыми через порт USB Type-C дужками, которые обеспечивают «до 16 часов активного использования» без подзарядки. Полная зарядка дужек занимает около 90 минут, а 15 минут быстрой зарядки дают примерно три часа работы. Оправы двух размеров доступны в чёрном, сером и коричневом цветах.

Функции доступности уже давно стали неотъемлемой частью многих умных очков. Сама компания Envision ранее выпускала подобные устройства на базе ныне не существующих устройств Google Glass. Функции интерпретации зрения с помощью ИИ, предоставляемые умными очками Ray-Ban Meta✴, уже нашли применение в сообществе людей со слабым зрением.

Очки Ally Solos доступны для предзаказа уже сегодня по специальной цене $399. Начало поставок намечено на октябрь 2025 года. В дальнейшем цена устройства поднимется до $699. Пока неясно, как Ally Solos смогут привлечь внимание пользователей на фоне более доступных конкурентов, ведь популярные Ray-Ban Meta✴ продаются всего за $299.

Когда-то считавшиеся всего лишь IT-аксессуаром, умные очки начали стремительно набирать популярность с выходом ИИ-чат-бота ChatGPT в конце 2022 года. Это связано с ростом удобства их использования в сочетании с развитием возможностей искусственного интеллекта. Согласно прогнозу исследовательской компании Fortune Business Insights, рынок умных очков, который в этом году составит $253,5 млрд, к 2032 году достигнет $1,6 трлн.

Тайваньская компания HTC сегодня представила умные очки Vive Eagle с поддержкой искусственного интеллекта. Устройство оснащено 12-мегапиксельной ультраширокоугольной камерой, встроенными динамиками и голосовым помощником на базе ИИ OpenAI GPT и Google Gemini, способным переводить текст в режиме реального времени, давать рекомендации и многое другое.

Apple также работает над собственными умными очками с ИИ-функциями, выход которых может состояться в 2026 году. Среди заявленных возможностей — визуальное распознавание объектов, приём телефонных звонков, воспроизведение музыки, перевод разговоров в реальном времени и пошаговая голосовая навигация. Для обеспечения автономности Apple разрабатывает собственный чип на архитектуре ARM.

Samsung планирует начать выпуск умных очков для массового рынка в конце 2026 года. В компании полагают, что умные очки могут в будущем заменить смартфоны благодаря возможности передавать изображение пользователю в режиме реального времени и обеспечивать постоянный комфорт при ношении, что выходит за рамки ограничений мобильных устройств.

«Голосовое протезирование с ИИ» превратит мозговые волны немых людей в беглую речь

Немало людей страдают от потери речи в результате заболеваний, хотя их когнитивные функции остаются незатронутыми. Поэтому на волне прогресса в области ИИ многие исследователи сосредоточились на синтезе естественной речи (вокализации) с помощью комбинации мозговых имплантатов и нейросети. В случае успеха эта технология может быть расширена для помощи людям, испытывающим трудности с вокализацией из-за таких состояний, как церебральный паралич или аутизм.

 Источник изображения: unsplash.com

Источник изображения: unsplash.com

Долгое время основные инвестиции и внимание учёных были сосредоточены на имплантах, которые позволяют людям с тяжёлыми формами инвалидности использовать клавиатуру, управлять роботизированными руками или частично восстанавливать использование парализованных конечностей. Одновременно многие исследователи сконцентрировались на разработке технологий вокализации, которые преобразует мыслительные модели в речь.

«Мы добиваемся большого прогресса. Сделать передачу голоса от мозга к синтетическому голосу такой же плавной, как диалог между двумя говорящими людьми — наша главная цель, — рассказал нейрохирург из Калифорнийского университета Эдвард Чанг (Edward Chang). — Используемые нами алгоритмы ИИ становятся быстрее, и мы учимся с каждым новым участником наших исследований».

В марте 2025 года Чанг с коллегами опубликовали статью в журнале Nature Neuroscience, в которой описали работу с парализованной женщиной, которая не могла говорить в течение 18 лет после перенесённого инсульта. При помощи учёных она обучала нейронную сеть, безмолвно пытаясь произнести предложения, составленные из 1024 разных слов. Затем звук её голоса был синтезирован путём потоковой передачи её нейронных данных в совместную модель синтеза речи и декодирования текста.

 Источник изображения: New England Journal of Medicine

Источник изображения: New England Journal of Medicine

Технология позволила сократить задержку между мозговыми сигналами пациента и полученным звуком с первоначальных восьми до одной секунды. Этот результат уже сопоставим с естественным для обычной речи временным интервалом в 100–200 миллисекунд. Медианная скорость декодирования системы достигла 47,5 слов в минуту, что составляет примерно треть от скорости обычного разговора.

Аналогичные исследования были произведены компанией Precision Neuroscience, причём её генеральный директор Майкл Магер (Michael Mager) утверждает, что их подход позволяет захватывать мозговые сигналы с более высоким разрешением за счёт «более плотной упаковки электродов».

На данный момент Precision Neuroscience провела успешные эксперименты с 31 пациентом и даже получила разрешение регулирующих органов оставлять свои датчики имплантированными на срок до 30 дней. Магер утверждает, что это позволит в течение года обучить нейросеть на «крупнейшим хранилище нейронных данных высокого разрешения, которое существует на планете Земля». Следующим шагом, по словам Магера, будет «миниатюризация компонентов и их помещение в герметичные биосовместимые пакеты, чтобы их можно было навсегда внедрить в тело».

 Источник изображения: UC Davis Health

Источник изображения: UC Davis Health

Самым серьёзным препятствием для разработки и использования технологии «мозг-голос» является время, которое требуется пациентам, чтобы научиться пользоваться системой. Ключевой нерешённый вопрос заключается в степени различия шаблонов реагирования в двигательной коре — части мозга, которая контролирует произвольные действия, включая речь, — у разных людей. Если они окажутся схожими, предварительно обученные модели можно будет использовать для новых пациентов. Это ускорит процесс индивидуального обучения, который занимает десятки или даже сотни часов.

Все исследователи вокализации солидарны в вопросе о недопустимости «расшифровки внутренних мыслей», то есть того, что человек не хочет высказывать. По словам одного из учёных, «есть много вещей, которые я не говорю вслух, потому что они не пойдут мне на пользу или могут навредить другим».

На сегодняшний учёные ещё далеки от вокализации, сопоставимой с обычным разговором среднестатистических людей. Хотя точность декодирования удалось довести до 98 %, голосовой вывод происходит не мгновенно и не в состоянии передать такие важные особенности речи, как тон и настроение. Учёные надеются, что в конечном итоге им удастся создать голосовой нейропротез, который обеспечит полный экспрессивный диапазон человеческого голоса, чтобы пациенты могли контролировать тон и ритм своей речи и даже петь.


window-new
Soft
Hard
Тренды 🔥
Forza Horizon 6 только вышла, а уже обогнала по пиковому онлайну в Steam все другие игры Xbox 45 мин.
Anthropic переманила сооснователя OpenAI — Андрей Карпатый будет обучать Claude 2 ч.
Запустится даже на картошке: хардкорный ролевой боевик Outward 2 получил дату выхода в раннем доступе Steam и системные требования 2 ч.
Apple представила ИИ-функции для инвалидов — включая управление коляской взглядом 3 ч.
Московский суд по инициативе Роскомнадзора оштрафовал разработчиков Fortnite на два миллиона рублей 3 ч.
VMware представила превью гипервизора ESXi-Arm Fling для Arm-серверов 4 ч.
Perplexity урезала лимиты для некоторых пользователей из-за злоупотреблений с промокодами 4 ч.
Эксплойт Fabricked тайно ломает аппаратную защиту чипов EPYC со 100-% успехом — AMD уже выпустила патч 4 ч.
Fortnite наконец вернулась в App Store по всему миру, а Epic Games готовится к финальной битве с Apple в суде 4 ч.
Илон Маск назвал решение суда по делу OpenAI «техническим» и пообещал его обжаловать 4 ч.