Сегодня 22 мая 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → взгляд

Apple представила ИИ-функции для инвалидов — включая управление коляской взглядом

Apple объявила об улучшении эффективности многих функций доступности в своих продуктах. Доработкам подверглись такие инструменты, как VoiceOver, «Лупа», голосовое управление и программа для чтения с ограниченными возможностями. Владельцы инвалидных колясок с электроприводом смогут управлять ими взглядом при помощи гарнитуры Vision Pro. Компания заверила, что добавление перечисленных возможностей ИИ не пошло в ущерб конфиденциальности пользователей.

По словам старшего директора Apple по глобальной политике и инициативам в области доступности Сары Херрлингер (Sarah Herrlinger), компания «предлагает новые, интуитивно понятные варианты ввода, исследования и персонализации, разработанные для защиты конфиденциальности пользователей на каждом этапе».

VoiceOver и «Лупа» помогают пользователям с нарушениями зрения понимать как информацию на экране, так и окружающую обстановку. Функция Image Explorer в VoiceOver использует Apple Intelligence для предоставления более подробных описаний изображений по всей системе, включая фотографии, отсканированные счета, личные записи и другой визуальный контент.

Благодаря обновлениям функции Live Recognition, пользователи VoiceOver могут нажать кнопку Action на iPhone, чтобы быстро задать вопрос о том, что находится в видоискателе камеры, и получить подробный ответ. «Лупа» теперь также работает с кнопкой Action, поэтому пользователи могут быстро задавать вопросы и получать ответы.

 Источник изображений: unsplash.com

Источник изображений: unsplash.com

Управлять самим приложением можно с помощью голосовых команд, таких как «увеличить» или «включить фонарик». Раньше голосовое управление требовало от пользователей запоминания точных слов и фраз. Apple заявляет, что благодаря ИИ эта функция теперь позволяет использовать естественный язык. Возможность «говорить то, что вы видите» подходит для навигации по любому приложению, включая программные продукты с визуальной структурой, такие как Apple Maps или «Файлы», используя интуитивно понятный язык.

«Чтение для людей с ограниченными возможностями» — это персонализированный режим чтения для пользователей с широким спектром нарушений, от дислексии до слабого зрения. Функция теперь работает с более сложными исходными материалами, такими как научные статьи, обрабатывая текст с несколькими столбцами, изображениями и таблицами. Краткие обзоры по запросу позволяют читателям получить общее представление о статье, прежде чем углубляться в детали.

Благодаря новой встроенной функции перевода пользователи могут читать текст на своём родном языке, сохраняя при этом оригинальные форматирование, шрифт и цвета. Любое видео можно дополнить субтитрами, сгенерированными ИИ. Субтитры создаются непосредственно на устройстве для сохранения конфиденциальности.

Не все пользователи инвалидных кресел с электроприводом обладают достаточной подвижностью для использования джойстика. Теперь они смогут использовать управление взглядом при помощи гарнитуры Vision Pro. Отслеживание взгляда не требует частой перекалибровки и работает в различных условиях освещения.

 Источник изображения: The Verge

На начальном этапе эта возможность будет доступна в США с системами привода колясок Tolt и LUCI, с поддержкой как Bluetooth, так и проводного подключения. В дальнейшем Apple пообещала добавить поддержку других моделей инвалидных колясок.

 Источник изображений: unsplash.com

Apple перечислила ещё ряд дополнительных улучшений доступности:

  • Функция распознавания движений в автомобиле (Vehicle Motion Cues) появится в visionOS, что поможет уменьшить укачивание у людей, использующих Apple Vision Pro в качестве пассажира в движущемся транспортном средстве.
  • Vision Pro будет поддерживать жесты лица для выполнения касаний и системных действий, а также новый способ выбора элементов глазами при использовании функции Dwell Control.
  • Функция Touch Accommodations предоставляет новый способ персонализации настроек в iOS и iPadOS.
  • Слуховые аппараты Made for iPhone будут более надёжно сопрягаться и переключаться между устройствами Apple, будет улучшен процесс настройки в iOS, iPadOS, macOS и visionOS.
  • В tvOS появится поддержка увеличенного текста, поэтому пользователи с ослабленным зрением смогут увеличить размер текста на экране для удобства чтения.
  • Функция распознавания имён (Name Recognition), которая может уведомлять глухих или слабослышащих пользователей, если кто-то произносит их имя, теперь работает более чем на 50 языках мира.
  • Для разработчиков приложений перевода языка жестов новый API позволяет добавлять переводчика к текущему видеозвонку FaceTime.
  • Пользователи, испытывающие трудности с использованием традиционных контроллеров, могут подключить контроллер Sony Access к устройствам iOS, iPadOS и macOS. Можно настроить джойстик, девять встроенных кнопок и до четырёх дополнительных внешних кнопок или специальных переключателей для персонализации расположения элементов управления. Также можно объединить два контроллера для индивидуальной настройки игрового процесса.

«Подход Apple к доступности не похож ни на один другой, — заявил генеральный директор Apple Тим Кук (Tim Cook). — Теперь, с Apple Intelligence, мы внедряем новые мощные возможности в наши функции доступности, сохраняя при этом нашу основополагающую приверженность принципу конфиденциальности на этапе проектирования».

С помощью Honor Magic6 Pro показали, как можно удалённо управлять автомобилем одним лишь взглядом

Смартфон Honor Magic6 Pro, вышедший в начале этого года, оснащён системой отслеживания глаз с ИИ. Она работает на базе программного обеспечения Eyeware GazeSense, использующего возможности чипа Snapdragon 8 Gen 3 вместе с 3D ToF-датчиком, размещённым в отверстии в экране. Благодаря этому, чтобы выбрать пункт назначения на карте и увеличить масштаб, достаточно просто посмотреть на экран смартфона. Но есть у данной технологии и другие применения.

 Источник изображения: Honor

Источник изображения: Honor

Как оказалось, это далеко не всё, что можно делать с помощью этой системы. Британский эксперт по автомобильной инженерии Джеймс Брайтон (James Brighton) продемонстрировал, что таким образом можно управлять некоторыми функциями автомобиля без помощи рук.

Просто посмотрев на соответствующий пункт меню на экране смартфона в течение 2-3 секунд, можно запустить или заглушить двигатель машины, а также заставить её двигаться вперед или назад. Поскольку вовсе не обязательно находиться в машине, чтобы воспользоваться этой функцией, её можно применить, чтобы заставить машину выехать из тесной парковки.

Следует отметить, что в настоящее время данная технология отслеживания взгляда доступна только в Китае и в любом случае это всего лишь ещё одна демонстрация того, на что способна технология отслеживания взгляда в сочетании с искусственным интеллектом. Но в целом идея заслуживает внимания, так как технология позволит управлять функциями автомобиля, не отрывая рук от руля и не прибегая к голосовым командам.


window-new
Soft
Hard
Тренды 🔥
AMD внезапно обновила драйверы для древних видеокарт Polaris и Vega 3 мин.
Microsoft теряет GitHub: сервис захлестнули сбои, хаос и массовый уход разработчиков 18 мин.
Без техподдержки, апдейтов и прав: почти треть крупного российского бизнеса использует зарубежное ПО 54 мин.
Терпение Sony подошло к концу: Bungie анонсировала финальное обновление для Destiny 2 3 ч.
Новый геймплейный трейлер амбициозной стратегии Warhammer 40,000: Dawn of War 4 раскрыл дату выхода и планы на DLC 5 ч.
В Steam стартовала закрытая «бета» Warhammer 40,000: Dark Heresy, а третье дополнение к Rogue Trader уже совсем рядом 5 ч.
Психогеографическая ролевая игра Hopetown получила геймплейный тизер и заручилась поддержкой ещё одного ветерана Disco Elysium 6 ч.
Предзаказы Assassin’s Creed Black Flag Resynced оказались среди «самых сильных в истории франшизы» — Ubisoft рассчитывает на большой успех 7 ч.
Ролевой боевик Fatekeeper в духе Dark Messiah of Might and Magic не заставит себя долго ждать — объявлена дата выхода в раннем доступе Steam 7 ч.
Функция Android 17 Continue On позволит переносить задачи между устройствами — у Apple такая есть уже 12 лет 8 ч.