Согласно сообщению The New York Times, уже в следующем месяце Meta✴ официально внедрит искусственный интеллект в свои умные очки Ray-Ban Meta✴. Мультимодальные функции искусственного интеллекта, такие как синхронный перевод, идентификация объектов, животных и памятников, находятся в раннем доступе с декабря прошлого года.

Источник изображений: Meta✴

Пользователи смогут активировать ИИ-помощника в умных очках при помощи фразы «Привет, Мета✴», а затем задать свой вопрос. Ответ будет получен через динамики, встроенные в оправу. Журналисты The New York Times протестировали работу искусственного интеллекта умных очков на улице, в продуктовом магазине, во время вождения автомобиля, в музеях и даже в зоопарке.

По их словам, ИИ смог в основном правильно идентифицировать домашних животных и произведения искусства, хотя порой делал довольно забавные ошибки. Так, очки с трудом могли идентифицировать животных зоопарка, которые находились далеко за ограждениями. Они также не смогли идентифицировать экзотический фрукт под названием черимойя даже после нескольких попыток. По словам исследователей, очки неплохо справлялись с синхронным переводом, поддерживая английский, испанский, итальянский, французский и немецкий языки.

Источник изображения: The New York Times

Выявленные недостатки лишь подчёркивают ограничения и компромиссы при разработке подобных продуктов. Очки, вероятно, могли бы лучше идентифицировать объекты, если бы камера имела более высокое разрешение, но установка качественного объектива увеличила бы вес и размер очков. Журналисты отметили, что разговаривать с виртуальным помощником на публике

Meta✴, вероятно, продолжит совершенствовать свои умные очки с течением времени. На данный момент функции искусственного интеллекта в умных очках Ray-Ban Meta✴ доступны только через список ожидания раннего доступа для пользователей в США.

В конце прошлого года умные очки Ray-Ban Meta✴ получили функцию визуального поиска на основе искусственного интеллекта, а теперь разработчик добавил ещё одну ИИ-функцию, пока в формате бета-версии. Устройство научили распознавать достопримечательности и рассказывать о них, выступая своего рода гидом для туристов.

Источник изображения: Andrew Bosworth

Технический директор Meta✴ Эндрю Босворт (Andrew Bosworth) показал, как работает новая функция. Система рассказала о таких достопримечательностях Сан-Франциско как мост «Золотые ворота», архитектурный ансамбль «Разукрашенные леди» и башня Койт — всё в формате подписей к изображениям. Глава компании Марк Цукерберг (Mark Zuckerberg) продемонстрировал ту же функцию с голосовыми пояснениями системы о достопримечательностях в штате Монтана, а также о том, как образуется снег.

Функция визуального поиска в умных очках Ray-Ban Meta✴ работает аналогично технологии Google Lens: пользователи «показывают», что они видят, и задают вопросы об этом ИИ. Система производит поиск в реальном времени при помощи Bing Search. Пока новинка работает у ограниченного числа пользователей — участников программы раннего доступа. Владельцы устройства в США могут записаться в лист ожидания на сайте продукта, указав серийный номер своих умных очков. Компания «работает над тем, чтобы сделать её доступной для большего числа людей», — заверил Эндрю Босворт.

Уже на этой неделе Samsung может продемонстрировать посетителям выставки MWC 2024 прототип умного кольца Galaxy Ring, о котором упоминала в конце января. В ассортименте продукции Apple подобного носимого устройства пока нет, но это не значит, что сама идея его создания не рассматривается специалистами компании. Они также размышляют об оснащении наушников Air Pods камерами и создании умных очков, которые можно носить весь день.

Источник изображения: Apple

Перечень инициатив Apple, которые находятся на разных этапах реализации, по традиции под конец недели перечислил Марк Гурман (Mark Gurman) на страницах издания Bloomberg. По его данным, в недрах Apple уже несколько лет вынашивается план по расширению ассортимента умных устройств, которые функционально в той или иной степени обеспечивали бы пользователей контролем за состоянием собственного здоровья. Дальше всего от реализации находится идея выпуска умного кольца Apple, которое позволило бы отслеживать частоту сердечных сокращений, степень насыщения крови кислородом, количество пройденных шагов и считать сжигаемые калории. По сути, такое кольцо стало бы компактной и более дешёвой альтернативой Apple Watch, поскольку в компании считают, что не всем пользователям носимой электроники нужны дополнительные функции, которые предлагаются умными часами и при этом повторяют возможности смартфона, например.

Идею создания умных очков, которые с комфортом можно было бы носить весь день, в компании Apple тоже обсуждают очень давно, и появление на рынке гарнитуры Vision Pro никак не снижает её актуальности. Потенциально более лёгкие очки дополненной реальности позволили бы не только стать альтернативой данному устройству, но и заменить некоторым пользователям и беспроводные наушники. Помимо камер, дисплеев и динамиков, такие умные очки должны будут оснащаться микрофоном для восприятия голосовых команд, а также различными датчиками для отслеживания состояния здоровья пользователя.

Наконец, третье направление рационализаторской мысли в сегменте носимых устройств Apple подразумевает оснащение беспроводных наушников AirPods камерами, которые нужны для более чёткого восприятия окружающей обстановки и взаимодействия с системами искусственного интеллекта. При этом разработчики хотели бы не увеличивать сильно габаритные размеры наушников. Носимая электроника сейчас обеспечивает компанию Apple примерно 10 % выручки, но экспансия продукции в этом сегменте замедлилась, поэтому нужны новые стимулы для поддержания спроса. Новые категории носимых устройств как раз призваны решить эту проблему.

Meta✴ анонсировала второе поколение умных очков Ray-Ban Meta✴ Smart Glasses одновременно с гарнитурой Quest 3. Они представляют собой комбинацию очков, камеры и наушников открытого типа, дополненных нейросетью Meta✴ AI. По мнению экспертов, дизайн очков практически идеален, но качество камеры и звука оставляют желать лучшего. Марк Цукерберг (Mark Zuckerberg) утверждает, что с продажами очков дела обстоят «намного лучше, чем он надеялся».

Источник изображений: Meta✴

Больше всего, кроме качества камеры и звука, экспертов разочаровало, что самые интересные функции оказались доступны только участникам бета-тестирования. Несмотря на это, встроенный в очки ИИ кажется им «аккуратным». После нелестных отзывов успешные продажи умных очков, похоже, застали Meta✴ врасплох. Аналитики полагают, что результатом могут стать некоторые изменения в стратегии компании, которая изначально не делала большой ставки на умные очки.

Для существующих владельцев умных очков Ray-Ban это означает, что Meta✴ скорее всего продолжит выпускать новые функции и обновления, такие как недавно выпущенное программное обеспечение версии 2.0. Популярность очков должна уберечь их от участи гарнитуры Meta✴ Quest Pro, которая получает лишь редкие исправления встроенного ПО и то лишь потому, что является частью общей платформы Quest. Не исключено, что умные очки станут для Meta✴ не менее важными, чем гарнитуры Quest.

Высока вероятность дальнейшего сотрудничества Ray-Ban и Meta✴, причём запуск новых гаджетов должен состоятся как можно быстрее, чтобы извлечь выгоду из успеха текущего поколения умных очков. Более того, некоторые популярные ИИ-функции умных очков могут появиться и на другом оборудовании, например, на Quest 3 или пока не анонсированных Quest Pro 2 и Quest 4. Функции ИИ становятся особенно актуальными для платформы Quest, поскольку ей предстоит выдержать острую конкурентную борьбу в области виртуальной и дополненной реальности с набирающей популярность Apple Vision Pro.

Стартап Brilliant Labs представил умные очки Frame на открытой платформе с мультимодальным ИИ, с помощью которых можно осуществлять поиск в Сети, выполнять перевод текста или разговора, генерировать картинки и т. д.

Источник изображений: Brilliant Labs

Frame весом всего 40 г используют чип nRF52840 Cortex-M4F и оснащены цветным микро-OLED-дисплеем с разрешением 640 x 400 пикселей, который проецируют изображение через призму прямо перед пользователем. Картинка отображается в поле зрения всего-то 20°. Для сравнения, поле зрения у Air 2 Ultra от Xreal составляет 52°. То есть пользователь Frame будет видеть изображение или текст в небольшом окошке.

Смарт-очки работают под управлением специальной операционной системы с «полностью открытым исходным кодом», а также поддерживают приложение Noa. Приложение включает ИИ-ассистента, который использует OpenAI для визуального анализа, Whisper для перевода и Perplexity для веб-поиска. В интервью Venture Beat компания заявила, что ИИ Noa «обучается и адаптируется как к пользователю, так и к задачам, которые он получает». Пользоваться Noa можно бесплатно, есть ежедневные лимиты. Устройством также можно управлять с помощью голоса.

В комплект поставки Frame входит камера с разрешением 1280 × 720 пикселей, микрофон, аккумулятор ёмкостью 222 мА·ч и зарядное устройство Mister Power, которое при подключении добавляет очкам «нос».

Frame поставляются в трех цветах: чёрном, сером и прозрачном. Цена новинки — $349. Можно также добавить линзы по рецепту, что увеличит цену до $448. Смарт-очки Frame уже доступны для предзаказа, поставки начнутся 15 апреля.

Компания ASUS представила на выставке CES 2024 в Лас-Вегасе ASUS AirVision M1 — умные очки с дисплеями Micro OLED, на которые можно выводить контент с подключённого смартфона или компьютера. ASUS AirVision M1 поддерживают возможность создания нескольких виртуальных экранов, что позволит пользователям выполнять одновременно несколько задач.

Источник изображений: ithome.com

Подобные носимые дисплеи выпускает TCL: NXTWear S и более поздние модели S Plus. Как и NXTWear, очки ASUS оснащены встроенными динамиками и микрофонами с шумоподавлением. Для передачи контента на экран используется проводное соединение через порт USB-C. Помимо этого, в левой дужке AirVision M1 встроена сенсорная панель, позволяющая выполнять настройку дисплеев, включая регулировку яркости и активацию 3D-режима, а также управлять воспроизведением контента, например, делать паузу при просмотре фильма. Устройство поддерживает 3DoF, благодаря чему можно закрепить виртуальный экран в определённом положении.

Очки оснащены дисплеями Micro OLED с разрешением 1080p и углом обзора по вертикали 57°, что позволяет разместить перед собой огромный виртуальный экран. Максимальная яркость дисплеев составляет 1100 кд/м², устройство обеспечивает 95-процентный охват цветового пространства DCI-P3.

Следует отметить, что, как и NXTWear, умные очки AirVision M1 не отличаются привлекательным дизайном и выглядят довольно громоздко. Цена устройства и сроки появления на рынке пока неизвестны. Для сравнения, похожие умные очки TCL предлагаются по цене $399.

Meta✴ предложила владельцам умных очков, произведённых совместно с Ray-Ban, новые передовые функции на основе искусственного интеллекта. Правда, пока они доступны в предварительном тестовом формате. Генеративный ИИ теперь рассказывает владельцам очков, что видно через их камеру и слышно через микрофоны.

Источник изображения: Meta✴

Возможности ИИ в умных очках продемонстрировал глава Meta✴ Марк Цукерберг (Mark Zuckerberg) — он попросил систему подобрать брюки к рубашке, которую он держал в руках. ИИ описал рубашку и предложил пару вариантов брюк, которые могли бы её дополнить. Господин Цукерберг также показал на камеру очков юмористическую картинку с надписями на испанском языке и попросил систему перевести надписи на английский. Ещё ИИ смог распознать странный фрукт, а также придумал смешную подпись к фотографии собачки в костюме.

В сентябре глава Meta✴ рассказал, что компания планирует внедрить в умные очки Ray-Ban многофункциональный ИИ, — он предположил, что люди в течение дня будут обращаться к помощнику Meta✴ AI по вопросам о том, что они видят и где находятся. О новых функциях устройства рассказал и технический директор Meta✴ Эндрю Босворт (Andrew Bosworth): в частности, устройство может предложить свои подписи к сделанным пользователем фотографиям.

Тестирование ИИ для умных очков будет проводиться только в США с участием ограниченного круга пользователей, которым придётся подавать заявки на участие в программе.

Если автопроизводители уже давно используют элементы дополненной реальности, проецируя показания приборов и подсказки навигации на определённую область ветрового стекла перед глазами водителя, то производителям мотоциклетной техники схожих целей добиваться сложнее. BMW решила эту проблему, предложив владельцам мотоциклов очки с крохотным проектором, которые позволяют видеть нужную информацию перед глазами.

Источник изображения: BMW

Устройство ConnectedRide, как поясняет Gizmodo, своими очертаниями напоминает спортивные очки со светофильтрами, при этом линзы сделаны сменными. Пользователь может как менять степень их прозрачности путём замены одного комплекта на другой, так и кривизну поверхности — можно менять показатели диоптрий в соответствии с предписаниями врачей. На поверхность правой линзы перед глазом водителя проецируется информация о скорости движения, текущей передаче мотоцикла, ограничении скорости на данном участке дороги, а также подсказки навигационной системы.

Источник изображения: BMW

Покупатель может выбирать между двумя габаритными исполнениями очков BMW ConnectedRide, в зависимости от расстояния между зрачками глаз. В достаточно изящном для устройства со встроенной электроникой корпусе размещён аккумулятор, допускающий эксплуатацию очков на протяжении 10 часов без подзарядки. Новые модели мотоциклов BMW должны поддерживать беспроводное сопряжение с этими очками. По крайней мере, электрический BMW CE 02 совместим с данным весьма полезным аксессуаром.

На CES 2023 компании Biel Glasses и Panasonic впервые представили умные очки для слабовидящих, которые вместе разрабатывали с 2021 года. Благодаря дополненной реальности очки Biel Glasses адаптируют окружение под остаточное зрение людей, позволяя слабовидящим различать препятствия и реагировать на изменение обстановки.

Источник изображений: Panasonic

Компания Biel Glasses была создана в 2017 году в Барселоне двумя родителями, которые хотели помочь своему слабовидящему сыну. Используя AR-технологии, ИИ и робототехнику (машинное зрение) разработчики создали рабочую концепцию и с помощью Panasonic воплотили её в жизнь.

Искусственный интеллект и машинное зрение распознают сцену (окружение), а смешанная реальность адаптирует её к остаточным возможностям зрения пациента, например, в виде ясно различимых графических указаний. В качестве дисплеев в очках используются экраны микро-OLED 5.2K HDR и система из линз-блинов, позволяющая сделать оптику максимально компактной. Для удобства ношения используется продуманная система креплений, распределяющая вес гарнитуры как можно лучше для длительного ношения очков.

Очки Biel Glasses решают проблемы мобильности, вызванные слабым зрением, которые наиболее серьезны при потере периферического зрения (широко известного как туннельное зрение, являющееся также следствием таких заболеваний, как глаукома и пигментный ретинит), позволяя пользователям воспринимать препятствия и другие опасности, чтобы они могли безопасно и самостоятельно передвигаться.

С завидным постоянством разного рода отраслевые эксперты делают прогнозы о сроках выхода очков дополненной реальности Apple, над которыми компания уже работает много лет, если опираться на неофициальные источники. В данный момент, как считают аналитики Haitong International Tech Research, такое устройство Apple задерживается до 2025 или 2026 года из-за проблем с разработкой.

Источник изображения: Getty Images, Justin Sullivan

По оценкам специалистов PP Foresight, рынок устройств дополненной и виртуальной реальности до сих пор находится в зачаточном состоянии. По их словам, в этом случае работает принцип «поиска проблемы для уже существующего решения». Хотя существуют различные области применения подобных устройств, их степень распространения пока не так велика. Ёмкость рынка устройств виртуальной реальности оценивалась Grand View Research в прошлом году в $21,83 млрд, а темпы роста до конца десятилетия должны в среднем составить 15 %.

При этом, по мнению аналитиков, рынок вполне готов к выходу умных очков Apple с подключением к iPhone и некоторыми базовыми функциями дополненной реальности. Такое устройство могло бы обеспечить эффект новизны, но при этом не быть слишком навязчивым. Представители PP Foresight верят, что когда Apple всё-таки выпустит умные очки с функцией дополненной реальности, то это устройство станет прорывным для всего рынка, подогревая спрос на аналогичные изделия конкурентов.