Теги → мимика

HTC анонсировала трекер мимики для фирменной VR-гарнитуры Vive Pro

Компания HTC анонсировала новый набор трекеров для фирменных гарнитур виртуальной реальности Vive. В их число вошло устройство, которое фиксирует мимику и движения рта. Трекер Vive Facial Tracker использует для фиксации мимики две камеры и инфракрасный излучатель.

theverge.com

theverge.com

HTC не назвала точную дату выхода устройства на рынок, однако заявила, что это произойдёт уже скоро. Стоимость трекера составит $130. Напомним, что HTC продемонстрировала экспериментальное устройство для отслеживания мимики, совместимое с фирменными VR-гарнитурами, ещё в 2019 году. Однако до сегодняшнего дня компания не подтверждала планы о его массовом выпуске на рынок. Трекер мимики способен распознавать 38 различных движений мышц лица, а также поддерживает совместную работу с Vive Pro Eye, вариантом Vive Pro с функцией отслеживания глаз. Таким образом, технологии HTC теперь практически полностью позволяют наделить лицо игрового персонажа мимикой пользователя.

К сожалению, трекер мимики лица будет совместим только с устройствами серии Vive Pro, которые, как становится понятно из названия, относятся к моделям профессионального уровня. Более доступные Vive Cosmos, ориентированные на потребительский рынок, пока не смогут работать с новым устройством. Тем не менее, отслеживание лиц является перспективным направлением для компаний, сосредоточенных на виртуальной реальности. Ранее на этой неделе глава Facebook Марк Цукерберг заявил, что VR-подразделение компании, Oculus, в будущих устройствах уделит особое внимание технологиям отслеживания глаз и мимики.

HTC также представила и третье поколение универсального VR-трекера. Устройство, внешне напоминающее шайбу и предназначенные для точного отслеживания телодвижений пользователя, стало на 33 процента компактнее и на 15 процентов легче предшественника. Оно также поступит в продажу по цене $130.

Технология Face2Face позволяет добавить свою мимику героям экрана

В Стэндфордском университете в США разработана технология анимации лица в режиме реального времени под названием Face2Face. Принцип её основан на динамическом просчёте (рендере) мимики актёра, которая затем накладывается на видео, к примеру, взятое с YouTube.

В качестве примера разработчики приводят несколько видеороликов с известными мировыми политиками: Джорджем Бушем-младшим (экс-президент США), Владимиром Путиным, Дональдом Трампом (кандидат в президенты США) и Бараком Обамой.

Принцип технологии основывается на создании виртуальной «маски», которая формируется на базе информации с веб-камеры. Такая технология позволяет по сути взять за основу фото или видео и добавить к нему необходимые «эмоции».

В прошлом году мы уже писали об этой разработке, однако, судя по видеоролику, эта методика была усовершенствована и отныне позволяет работать почти с любым видео. Разумеется, речь идёт о тех роликах, где один персонаж и его снимают крупным планом.

Отмечается, в частности, что новая версия технологии позволяет также реализовывает естественное освещение для «бесшовного» встраивания трёхмерной «виртуальной маски» мимики в видеопоток.

К слову, подобные технологии разрабатываются уже далеко не первый год. Большой популярностью на ПК пользуется программа Crazy Talk (актуальная версия на сегодня — 8), ранее мы также сообщали о разработке схожей технологии в Вашингтонском университете, однако там имела место полноценная трёхмерная модель головы человека.

К сожалению, у такой технологии есть большой потенциал не только в сфере развлечений, но и в криминальной среде, особенно учитывая развитие видеосвязи и программ голосового синтеза. 

Разработана видеосистема для копирования эмоций в режиме реального времени

Специалисты Университета Эрлангена–Нюрнберга совместно с исследователями Стэнфордского университета и коллегами из Института информатики общества Макса Планка представили систему, позволяющую считывать эмоции с лица одного человека и переносить их на цифровую копию лица другого. 

Разработанный аппаратно-программный комплекс выделяется, прежде всего, тем, что описанная процедура происходит в режиме реального времени. Работает система следующим образом: при помощи специальных камер осуществляется распознавание эмоций на лице объекта №1, после чего система обрабатывает собранные данные и адаптирует считанную мимику под оцифрованное лицо объекта №2. 

Отличительной чертой проекта значится максимальная фотореалистичность описанного процесса. Выбранный авторами идеи алгоритм позволяет скопировать и воспроизвести в указанном формате эмоции так, словно объект №2 повторяет мимику объекта №1 в реальной жизни. Убедиться в этом можно просмотрев шестиминутный видеоролик, представленный разработчиками:

Где может быть использована представленная технология? Прежде всего, дублирование эмоций — достаточно интересное и даже вероятно потенциально востребованное решение для различных онлайн-видеосервисов. Кроме того, создание анимации лиц виртуальных персонажей энтузиастами-любителями также должно упроститься в случае, если рассматриваемая технология станет общедоступной. 

window-new
Soft
Hard
Тренды 🔥
Рынок 3D XPoint, MRAM, ReRAM и других перспективных типов памяти вырастет к 2031 году до $44 млрд 52 мин.
Apple выпустит обновлённый MacBook Air с дисплеем Mini-LED к середине 2022 года, предсказывает аналитик 2 ч.
Энтузиаст впервые заставил вместе работать процессор на RISC-V и видеокарту Radeon RX 6700 XT 2 ч.
Oppo повысила скорость быстрой зарядки и придумала, как продлить жизнь батарее смартфонов 2 ч.
Наводнение в Китае может задержать поставки iPhone 13, несмотря на быстрое восстановление производства 3 ч.
Почти флагманский смартфон ZTE Axon 30 с подэкранной камерой предложит до 20 Гбайт ОЗУ 3 ч.
Качественные рендеры раскрыли внешность смартфона Motorola Edge 20 3 ч.
Видеообзор смартфона Infinix Note 10 Pro с крупным 6,95-дюймовым экраном и поддержкой NFC 4 ч.
Honor совсем скоро представит мощный планшет V7 Pro на чипе MediaTek Dimesnity 1300T 4 ч.
Портативная консоль Playdate в стиле Game Boy станет доступна для предзаказа на следующей неделе за $179 4 ч.