Гарнитура Apple Vision Pro поможет людям лучше видеть

Сегодня Apple анонсировала новые функции доступности для своей гарнитуры дополненной реальности Vision Pro. Основная камера гарнитуры будет использоваться для увеличения объектов и показа «живых описаний окружения» с использованием искусственного интеллекта и машинного обучения. Новые возможности применимы как к реальным, так и к виртуальным объектам. Они появятся в visionOS в конце этого года.

Источник изображений: Apple

В качестве примера работы новой функции Apple показывает вид от первого лица, когда владелец Vision Pro переходит от чтения увеличенного изображения реальной книги рецептов к приложению «Напоминания», также увеличенному для удобства чтения. Также в рамках обновления функция доступности VoiceOver от Apple будет «описывать окружение, находить объекты, читать документы и многое другое».

Apple объявила о выпуске специализированного API для сторонних разработчиков приложений доступности. По словам компании, API может быть использован для «живой, индивидуальной помощи при визуальной интерпретации, […] предоставляющей пользователям больше возможностей понять своё окружение без помощи рук». Сейчас возможность разработки сторонних приложений может показаться не особенно востребованной, учитывая скромные продажи Vision Pro, но она, несомненно, обретёт популярность в следующих поколениях носимых устройств Apple.

Apple также сообщила о добавлении в visionOS, iOS и iPadOS нового протокола, который поддерживает интерфейсы мозг-компьютер (brain-computer interface, BCI) с помощью функции доступности Switch Control. Эта функция обеспечивает альтернативные методы взаимодействия с устройством, например, при помощи движений головы или отслеживания зрачков.

Стандарт BCI разрабатывался совместно с Synchron — компанией, создающей мозговые импланты. Благодаря этому партнёрству Apple планирует углубить разработку интерфейсов мозг-компьютер для преобразования мозговых сигналов в команды взаимодействия с интерфейсами iPhone, iPad, Mac и Apple Vision Pro. Разработанный Synchron имплант предназначен для установки в двигательную кору головного мозга.