Хотя роботов научили имитировать движения людей, для реалистичности всё же не хватает одного — человеческого взгляда. Несмотря на то, что роботам устанавливают искусственные глаза, их взгляд, выглядят безжизненным. Вместе с тем иногда глаза могут быть очень выразительными, и вы можете определить, что человек чувствует, по его взгляду. Этот недостаток решила устранить студия Disney, создав робота, чей взгляд выглядит довольно реалистично.

Disney Research

Разработали нового работа исследователи подразделения Walt Disney Imagineering, специалисты по робототехнике Иллинойсского университета в Урбане-Шампейне и учёные Калифорнийского технологического института. Новый робот может имитировать мимику человека, в частности мигание глаз и лёгкие движения головы.

Скрытый в области груди датчик предупреждает робота, когда нужно повернуться лицом к человеку, стоящему перед ним. Его глаза после прямого зрительного контакта начинают воспроизводить саккады — характерные для человека непроизвольные быстрые движения глаз в определённом ритме. Робот также слегка перемещается вверх и вниз, имитируя дыхание.

По всей видимости, Disney вскоре сможет использовать эту технологию для аниматронных персонажей в своих тематических парках. Известно, что исследовательское подразделение компании уже довольно продолжительное время работает над созданием более реалистичных роботов. В 2018 году компания представила робота Stickman, способного делать сальто назад в воздухе, который примерно соответствует росту «человека-каскадера с поднятыми над головой руками».

Специалистам Disney осталось только добавить новому роботу что-то похожее на кожу. Иначе он в нынешнем виде лишь напугает гостей Диснейленда.

Компания Tobii представила смарт-очки Tobii Pro Glasses нового поколения, предназначенные для отслеживания взгляда пользователя. Как и предыдущая версия, модель Tobii Pro Glasses 3 позволяет с помощью функции отслеживания взгляда фиксировать и анализировать естественное визуальное поведение человека в реальных условиях.

Вместе с тем новая модель заметно меньше предшественника. Её габариты сопоставимы с размерами обычных солнцезащитных очков в форм-факторе «авиатор». Кроме того, компания добавила в новом устройстве более совершенную технологию записи.

Tobii Pro Glasses 3 оснащены четырьмя усовершенствованными широкоугольными камерами и 16 излучателями, встроенными в линзы, которые не перекрывают периферийное зрение, обеспечивая комфортное ношение.

Устройство обладает прочной конструкцией, что позволяет носить его со средствами индивидуальной защиты (СИЗ), такими как шлемы и головные уборы. Это расширяет диапазон сценариев использования смарт-очков.

Смарт-очки поставляются с комплектом аксессуаров, включая дополнительные защитные линзы для защиты от инфракрасного излучения, позволяя проводить исследования в условиях яркого освещения вне помещений и в ситуациях, требующих дополнительной защиты глаз.

В отличие от потребительского оборудования компании, которое продавалось в качестве аксессуара и интегрировалось в гарнитуру смешанной реальности, очки Tobii Pro Glasses 3 разработаны специально для корпоративного использования.

Дизайнеры могут использовать их, чтобы видеть, как пользователи взаимодействуют с прототипами продуктов, например, производить отслеживание направления взгляда водителя при тестировании новых автомобильных экранных дисплеев.

Маркетологи могут использовать очки, чтобы отслеживать, какая упаковка или дизайн продукта привлекает наибольшее внимание. Менеджеры могут с их помощью наблюдать за тем, куда смотрят работники, что помогает повысить безопасность рабочего места или устранить отвлекающие факторы. Аудио записывается вместе с видео и синхронизированными данными отслеживания глаз, чтобы предоставить полную картину опыта. Данные отслеживания движения глаз собираются с частотой 50 или 100 Гц, а технология компенсации соскальзывания обеспечивает их согласованность во время записи, даже если очки в ходе процесса мониторинга смещались.

Модель Tobii Pro Glasses 3 уже доступна для приобретения.

Ракетно-космическая корпорация «Энергия» имени С.П. Королёва рассказала о передовой системе, которая позволит контролировать буквально все действия космонавтов и определять их готовность к выполнению полётных заданий.

Проект, о котором идёт речь, пока находится на экспериментальной стадии. При этом в рамках инициативы специалистами Лётно-космического центра РКК «Энергия» уже получены несколько патентов на изобретения.

Фотографии Роскосмоса

Главная задача системы заключается в том, чтобы повысить эффективность контроля и управления действиями космонавтов. Для этого предлагается с высокой точностью определять местоположение членов экипажа внутри орбитальной станции, контролировать их ориентацию, положение головы и даже направление взгляда.

Работа комплекса строится на принципе пространственной триангуляции, который лежит в основе навигационных систем ГЛОНАСС и GPS. Точные координаты объекта определяются с помощью источника излучения, который расположен на теле космонавта, и приёмников сигнала, установленных на борту космического аппарата. При этом может использоваться ультразвуковое или инфракрасное излучение.

Ожидается, что новая система поможет в решении целого ряда задач. К примеру, она позволит контролировать выполнение строгого алгоритма полётной операции, когда нарушение последовательности действий может привести к нежелательным последствиям: скажем, если космонавт не посмотрел на сигнализатор перед выдачей очередной команды, то система сможет либо дать ему звуковое предупреждение, либо даже заблокировать прохождение команды.

Комплекс также может использоваться в процессе тренировок космонавтов: система поможет в правильном выполнении последовательности операций и укажет на ошибки.

Наконец, анализируя действия и перемещения космонавтов внутри станции, специалисты смогут более эффективно организовать доступное пространство и повысить комфорт пребывания членов экипажа на борту. 

Сетевые источники обнародовали дополнительную информацию о процессорах нового поколения Qualcomm, рассчитанных на использование в различных носимых устройствах.

О том, что Qualcomm проектирует передовые чипы для смарт-часов, фитнес-трекеров и других мобильных гаджетов, мы сообщали на прошлой неделе. Тогда говорилось, что все разрабатываемые изделия обеспечат поддержку Wi-Fi и Bluetooth, а некоторые модификации — поддержку GPS и LTE. Процессоры будут характеризоваться пониженным энергопотреблением.

И вот теперь стало известно, что чипы войдут в семейство Snapdragon Wear 3100. Они получат четыре вычислительных ядра ARM Cortex-A7. В составе графической подсистемы, вероятно, будет задействован контроллер Adreno 304.

Отмечается, что процессоры обеспечат поддержку функций отслеживания взгляда. В частности, специальная камера сможет контролировать положение зрачка и параметры отражения света от роговицы с частотой 120 кадров в секунду.

Таким образом, полагают наблюдатели, новые процессоры смогут стать основой не только наручных носимых устройств, но и шлемов дополненной реальности с системой отслеживания взгляда пользователя.

Первые устройства на новых процессорах дебютируют до конца 2018 года. На них будет применяться программная платформа Google Wear OS. 

Компании Tobii и Qualcomm Technologies объявили о сотрудничестве с целью расширения функциональности шлемов виртуальной реальности на платформе Snapdragon 845 Mobile VR.

Эталонный VR-шлем на процессоре Snapdragon 845 был представлен в феврале нынешнего года. Референсная платформа предусматривает создание полностью самодостаточных гаджетов, которым не требуется подключение к компьютеру или установка смартфона. Разработчики смогут оснащать такие шлемы двумя дисплеями с разрешением 2400 × 2400 точек каждый. Встроенные датчики и камеры обеспечат функции отслеживания с 6 степенями свободы (6DoF).

В рамках партнёрства Tobii и Qualcomm Technologies намерены наделить платформу Snapdragon 845 Mobile VR средствами отслеживания взгляда. Напомним, что именно на таких технологиях специализируется компания Tobii. Система использует невидимое для человека инфракрасное излучение для определения направления взгляда пользователя.

Появление такой системы в VR-шлемах позволит реализовать ряд полезных функций. Зная, куда смотрит пользователь в каждый момент времени, устройство сможет осуществлять детальную прорисовку именно этой области, несколько снижая детализацию других. Такой подход обеспечит оптимальный баланс качества изображения и энергопотребления.

Кроме того, VR-шлемы смогут подстраиваться под конкретного пользователя. Наконец, будет обеспечен полноценный визуальный контакт с объектами в виртуальном мире. 

Холдинг «Росэлектроника», входящий в госкорпорацию Ростех, сообщил о создании прототипа мобильного устройства, реагирующего на движения глаз человека. Разработанная система нацелена, в частности, на реализацию функций управления «силой взгляда».

Устройство в зависимости от задач может интерпретировать движения глаз по-разному — как управляющий сигнал или как параметры процесса восприятия человеком визуальной информации.

Система состоит из аппаратной и программной частей. Первая представляет собой очки, оснащённые двумя парами цифровых видеокамер. Фронтальные камеры фиксируют информацию об окружающей обстановке, которая поступает оператору, две другие — с инфракрасной подсветкой — отслеживают движения его глаз. Трекер обеспечивает запись целого ряда параметров.

Что касается программной части, то она позволяет осуществлять расчёт как минимум семи наиболее распространённых метрик глазодвигательного поведения человека.

Создатели выделяют две основные группы задач, которые могут решаться с помощью новой системы. Первая связана с пассивным сбором и анализом получаемой информации, например, в медицинских целях при исследовании пациентов, или в коммерческих — при оценке эффективности рекламных материалов или интерфейса сайта.

Вторая группа — реализация зрительных интерфейсов взаимодействия с различной электроникой и компьютерной техникой. Управление при помощи взгляда может использоваться в различных интерактивных комплексах, шлемах виртуальной реальности, устройствах для людей с ограниченными возможностями и нарушениями нервной системы. 

«Яндекс» приступает к закрытому бета-тестированию нового сервиса под названием «Яндекс.Взгляд», рассчитанного на компании, бизнес-предприятия и различные веб-сервисы.

Проект, как сообщает РБК, позволяет проводить опросы с целью изучения клиентской аудитории. Исследование можно настроить по количеству респондентов или под конкретные устройства — персональные компьютеры или мобильные гаджеты. Выборка целевой аудитории будет формироваться автоматически: учитываются социально-демографические характеристики потенциальных респондентов, их поведение в Интернете и пр.

В основе сервиса лежит «Крипта» — технология «Яндекса», которая работает на базе машинного обучения. Данная система умеет определять принадлежность пользователей к определённым группам по их поведению в Интернете: например, какие слова они используют в запросах, сколько запросов делают за сессию, какие сайты посещают, в какое время суток выходят в Сеть, — всего около 300 факторов. Утверждается, что «Крипта» довольно точно прогнозирует интересы каждого пользователя.

За размещение опросов в Интернете будет отвечать «Яндекс». Кроме того, компании смогут проводить исследования на собственных сайтах. Стоимость использования «Яндекс.Взгляда» составит от 7000 рублей.

Об инвестициях в новый сервис в компании «Яндекс» умалчивают. Сроки начала его коммерческого внедрения пока также не раскрываются. 

Добавление поддержки технологии отслеживания взгляда в последние сборки будущего осеннего обновления Windows 10 Fall Creators Update было хорошо воспринято общественностью, но функция требует наличия определённых аппаратных решений, которые не очень хорошо совмещаются с планшетами или ноутбуками, потому что требуют размещения перед ПК.

Впрочем, если судить по одному из патентов Microsoft, компания рассматривает способ преодоления этих неудобств и интеграции поддержки технологии отслеживания глубины, жестов и взгляда в свои планшеты Surface Pro. Описывается идея модуля, использующего коннекторы клавиатуры Surface для питания и передачи данных и при этом надёжно закрепляемого с помощью магнитов.

В свою очередь модуль наделяется слотами для клавиатуры Surface, выступая своеобразным переходником, не мешающим нормальному взаимодействию с устройством. Наклон камер выбран так, чтобы отслеживать движения рук пользователя в области над клавиатурой, а угол обзора задуман достаточный для распознавания лиц. Основная новация в аксессуаре — модульность и уникальное подключение к планшету.

Одним из изобретателей запатентованного решения выступает Кфир Кармон (Kfir Karmon), руководящий проектом Prague Lead и являющийся управляющим инженером в Лаборатории продвинутых технологий Microsoft. Проект Prague позволяет разработчикам приложений добавлять поддержку базовых жестов рук без особых сложностей, а также с небольшими усилиями создавать собственные жесты. Вот посвящённый ему старый ролик:

Впрочем, пока не известно, собирается ли Microsoft реализовать идею описанного в патенте аксессуара на практике, или же при желании просто интегрирует необходимые аппаратные модули в новый планшет или ноутбук Surface.

Microsoft планирует добавить в Windows 10 встроенную поддержку отслеживания глаз. В первую очередь она предназначена для тех, кто страдает нейромышечными заболеваниями вроде бокового амиотрофического склероза.

Технология позволит управлять различными элементами интерфейса операционной системы без традиционных мыши и клавиатуры. Например, приложения можно будет запускать, удерживая взгляд на иконках. А водя глазами по экранной клавиатуре, пользователь сможет вводить текст.

Функция получит название Eye Control («Управление глазами») и потребует наличия специального устройства вроде Eye Tracker 4C от Tobii. Microsoft тесно сотрудничала с производителем над добавлением в Windows 10 отслеживания взгляда, поэтому вскоре операционная система будет поддерживать различные модели Tobii вроде Dynavox PCEye Mini, PCEye Plus и EyeMobile Plus. Функция Eye Control находится в стадии бета-теста: чтобы её опробовать, нужно подписаться на инсайдерскую программу Windows.

Microsoft начала работать с Tobii после первого хакатона One Week, который прошёл в 2014 году. Редмондский гигант сформировал новую исследовательскую команду, которая занялась изучением технологии отслеживания взгляда.

Команда Windows создала несколько прототипов технологии, и теперь генеральный директор Сатья Наделла (Satya Nadella) позволил встроить её поддержку в операционную систему. Скорее всего, Eye Control станет доступна всем пользователям Windows 10 до конца этого года.

Ссылаясь на источники, знакомые с вопросом, ресурс MacRumors сообщил, что Apple приобрела немецкого разработчика аппаратных средств и программного обеспечения для отслеживания движений глаз SensoMotoric Instruments. Помимо приложений дополненной реальности, аппаратная платформа SensoMotoric Instruments используется для раннего обнаружения аутизма у детей, картирования головного мозга и в неврологии, исследования органа зрения, в психологии, физической культуре и т. д.

Apple подтвердила приобретение Axios, выпустив стандартное заявление: «Apple время от времени покупает небольшие технологические компании, и мы обычно не обсуждаем нашу цель или планы».

Разработанная SensoMotoric Instruments технология позволяет записывать и отслеживать взгляд пользователя в режиме реального времени, около 120 движений в секунду. В частности, SensoMotoric Instruments создала смарт-очки, которые позволяют отслеживать взгляд и используются в различных областях, например, для тренировки теннисистов. По данным SensoMotoric Instruments, её технологиями пользуется порядка 100 тысяч человек.

Отслеживание движений глаз является основной технологией, которую многие специалисты, работающие над виртуальной и дополненной реальностью, считают крайне важной для гарнитуры, действительно создающей полный эффект присутствия.

Гарнитуры с функцией отслеживания движения глаз могут использовать эту технологию как компонент в пользовательском интерфейсе.

Данная технология также может помочь уменьшить объём вычислительной мощности компьютерных устройств, необходимой для визуализации виртуального мира или создания виртуальных персонажей.

SensoMotoric Instruments имеет штаб-квартиру в Тельтове (Германия), с дополнительным офисом в Бостоне (Массачусетс). Условия сделки и статус существующих сотрудников компании пока неизвестны. Технология, скорее всего, не будет реализована в «iPhone 8», но Apple, по слухам, работает над гарнитурой дополненной реальности Smart Glasses, и специалисты SensoMotoric Instruments будут полезны в этом проекте.

Valve сотрудничает с SensoMotoric Instruments над интеграцией технологии отслеживания взгляда в свою открытую платформу OpenVR. Скоро публике будет даже показана новая версия шлема HTC Vive с этой технологией: как сообщается, Valve и SMI уже отправили какое-то количество таких шлемов своим партнёрам и разработчикам по всему миру.

Директор SMI Кристиан Виллвок (Christian Villwock) отмечает, что Valve осознала особую важность технологий отслеживания взгляда для виртуальной реальности на ранних стадиях. Технология открывает новые возможности для навигации в виртуальной реальности, для создания более отзывчивых аватаров и для применения более щадящих техник рендеринга вроде фовеации, когда на периферии взгляда картинка визуализируется в пониженном разрешении. Oculus также проявляет интерес к технологии отслеживания взгляда и в начале этого года поглотила датскую компанию The Eye Tribe.

Ясер Малайка (Yasser Malaika) из Valve отмечает, что сотрудничество с SMI ведётся как в области исследования и подготовки, так и в деле предоставления технологии отслеживания взгляда возможно большему кругу разработчиков благодаря созданию особой версии Vive. Компания надеется скоро выяснить, насколько позитивно отслеживание взгляда может повлиять на развитие VR.

Хотя технология наверняка станет частью HTC Vive в будущем, пока речь идёт лишь о версии шлема для разработчиков — о появлении потребительской модели пока ничего не известно. Впрочем, SMI подписала соглашения уже минимум с десятком производителей VR-шлемов.

Отдельно стоит упомянуть тот факт, что Valve объявила о сотрудничестве с LG Electronics в области виртуальной реальности — корейская компания последует за HTC и покажет вскоре прототип своего шлема виртуальной реальности с поддержкой SteamVR. Детали и стоимость будут известны позже, по словам Valve.

От смартфона ZTE Hawkeye ожидали пусть и не технологический прорыв, но как минимум появление инновационного мобильного устройства на современной аппаратной платформе. Разработанный китайскими специалистами в рамках проекта Project CSX гаджет создавался с учётом пожеланий и креативных идей от будущих пользователей. По итогам организованного конкурса ZTE Hawkeye получил технологию отслеживания взгляда и возможность фиксации на вертикальной поверхности за счёт использования специальных чехлов. 

Рабочий прототип ZTE Hawkeye был впервые продемонстрирован публике в ходе выставки CES 2017, после которой компания-производитель решила найти финансирование для серийного выпуска устройства на краудфандинговой площадке Kickstarter. Разочарование пришло в момент оглашения параметров «народного» устройства, которое обещало стать венцом технологий в оригинальной обёртке: вместо революционного смартфона с флагманским «железом» ZTE представила устройство среднего уровня. Единственное, чем оно было примечательно и что выделяло его на фоне бесчисленного множества гаджетов на рынке, так это упомянутая технология отслеживания взгляда и способ крепления на поверхности.

К слову, недовольство новинкой расстроенные поклонники выразили самым прямым образом: организованная ZTE Kickstarter-кампания имеет все шансы с треском провалиться, так как за 20 с лишним дней до окончания сбора средств из первоначально заявленных $500 тыс. собрать удалось пока лишь $35 тыс.

Сложившаяся вокруг смартфона Hawkeye ситуация вынудила руководство компании официально признать свою ошибку, о чём она уведомила пользователей соответствующая запись в блоге на сайте ZTE. 

«Когда идея создания смартфона, способного отслеживать направление взгляда и крепиться к вертикальной поверхности была выбрана основополагающей при реализации проекта Project CSX, мы попросту упустили из вида другие пожелания пользователей. Остальные идеи, за которые голосовали наши поклонники, были отброшены <...>, и релиз смартфона пусть и с необычными возможностями, но среднего уровня в целом, был не до конца обдуманным шагом. Это было нашей ошибкой», — написал вице-президент ZTE по технологиям, планированию и развитию партнерских отношений Джефф Йи (Jeff Yee).

В списке основных претензий и требований к смартфону Hawkeye, ознакомиться с которыми может каждый участник ZTE-сообщества, значатся:

• откровенно слабый и не устраивающий потенциальных покупателей устройства процессор Snapdragon 625, вместе которого недовольная общественность желает видеть чип Snapdragon 821, а лучше — Snapdragon 835;
• малая ёмкость аккумулятора — всего 3000 мА·ч;
• желание заполучить стоковую версию ОС Android с ПО для отслеживания взгляда;
• недостаточный объём оперативной памяти, составляющий 3 Гбайт. 

Учитывая «успехи» ZTE на Kickstarter, критику со стороны экспертов и простых пользователей, а также опубликованное признание в неправильном подходе к проектированию Hawkeye, существует большая вероятность закрытия проекта или его глобального переосмысления разработчиками. 

Компания Acer привезла в Лас-Вегас (Невада, США) на выставку CES 2017 игровой монитор Predator Z301CT — первое в мире подобное изделие с поддержкой технологии Tobii.

Напомним, что система Tobii предназначена для отслеживания взгляда пользователя. Технология использует инфракрасное излучение, невидимое для человека. Система даёт возможность выполнять определённые операции движением глаз — к примеру, осуществлять прокрутку.

Монитор Predator Z301CT имеет вогнутую форму. Размер составляет 30 дюймов по диагонали, разрешение — 2560 × 1080 пикселей. Панель характеризуется яркостью 300 кд/м², контрастностью 3000:1, углами обзора по горизонтали/вертикали до 178 градусов и временем отклика 4 мс.

Новинка поддерживает технологию NVIDIA G-Sync. Частота обновления составляет 200 Гц. Обеспечивается 100-процентный охват цветового пространства sRGB и 72-процентный охват пространства NTSC.

Предусмотрены 3-ваттные стереофонические динамики, интерфейсы DisplayPort 1.2a и HDMI 1.4, а также четыре порта USB. Подставка позволяет регулировать углы наклона и поворота дисплея, его высоту по отношению к поверхности стола.

В продажу монитор Acer Predator Z301CT поступит в феврале по цене около 900 долларов США. 

Принадлежащая Facebook компания Oculus подтвердила поглощение небольшой команды The Eye Tribe, которая занимается технологиями отслеживания взгляда. Эта компания разработала для компьютеров устройства слежения за движением глаз стоимостью от $100, а также программное обеспечение, позволяющее с помощью взгляда управлять интерфейсами.

Вдобавок The Eye Tribe создала технологию визуализации методом фовеации. Эта технология существенно снижает вычислительную нагрузку, отдавая приоритет при визуализации тем участкам изображения, куда направлен взгляд пользователя, и снижая качество и разрешение картинки на периферии. Пользователь едва ли может ощутить разницу, а требования к мощности системы заметно падают: высвободившиеся ресурсы можно направить на увеличение частоты кадров или же на создание более сложных сцен. Многие компании, включая NVIDIA, разрабатывают такие методы визуализации. Подобная технология, возможно, найдёт себе применение уже в будущем беспроводном шлеме Oculus с кодовым именем Santa Cruz.

С помощью отслеживания взгляда также можно обеспечить автоматическую перемотку текста при чтении, управление воспроизведением и остановкой видеопроигрывателя, сделать игровой процесс более захватывающим и так далее. Автомобильные интерфейсы могут получить преимущество благодаря технологии, а разработчики приложений и рекламодатели обзаведутся статистикой о тех элементах приложений, на которые люди чаще всего смотрят.

Хотя Oculus подтвердила факт сделки, никаких деталей о стоимости и о её последствиях не сообщается — пока нет сведений и о будущей поддержке пользователей The Eye Tribe. В эту небольшую компанию инвестировано уже порядка $3 млн компаниями вроде Startup Bootcamp, также предприятие получило грант в размере $2,3 млн от Датского национального фонда передовых технологий.

Стоит отметить, что Google не так давно тоже приобрела компанию Eyefluence, которая занимается технологиями отслеживания взгляда. Похоже, в VR-индустрии растёт убеждение, что виртуальная реальность не обойдётся без подобных новаций.

«Объединённая приборостроительная корпорация» (ОПК) продемонстрировала прототип носимого прибора, позволяющего взаимодействовать с различными электронными устройствами при помощи взгляда.

Разработка получила название «Нейро-М». Это носимая гарнитура, оснащённая дисплеем дополненной реальности и системой для определения направления взгляда пользователя. Гаджет призван упростить ежедневное взаимодействие человека с электронными устройствами — компьютерами, смартфонами и «умными» бытовыми приборами.

Для точного отслеживания направления взгляда задействованы две камеры с частотой регистрации движений глаза до 200 кадров в секунду. Сопутствующий нейроинтерфейс «мозг–компьютер» анализирует электроэнцефалограмму пользователя, повышая эффективность взаимодействия с электронными устройствами.

Гарнитура «Нейро-М» может стать незаменимым помощником для людей с ограниченными возможностями. Управление взглядом в данном случае заменит клавиатуру и мышь. В частности, с помощью «Нейро-М» можно набирать тексты, просматривать интернет-сайты, работать в различных программах и т. д. В случае с бытовой техникой возможно дистанционное включение и выключение приборов.

В настоящее время гарнитура проходит тестирование. О сроках вывода новинки на рынок ничего не сообщается.