Сегодня 18 ноября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → движение

Исследователи c помощью ИИ превратили обычные умные часы в систему точного отслеживания движений руки

Учёные из Корнельского университета и Корейского института передовых технологий (KAIST) разработали систему WatchHand, которая при помощи искусственного интеллекта превращает обычные умные часы в устройство отслеживания движений рук. WatchHand работает в режиме реального времени, использует встроенный динамик и микрофон стандартных умных часов и не требует никакого дополнительного оборудования.

 Источник изображения: Jason Koski / Cornell University

Источник изображения: Jason Koski / Cornell University

Принцип работы системы заключается в излучении неслышимых звуковых волн из динамика умных часов. Отражённые волны считываются микрофоном устройства, создавая эхо-профиль. Алгоритм машинного обучения обрабатывает эти данные непосредственно на устройстве для оценки положения руки в трёх измерениях.

В отличие от существующих носимых систем отслеживания движений рук, которые полагаются на камеры или громоздкие внешние датчики, WatchHand не требует дополнительного оборудования. Это делает систему значительно более практичной для повседневного использования и масштабируемой для миллионов существующих устройств.

Система была протестирована на 40 участниках в четырёх отдельных исследованиях, собрав около 36 часов данных о жестах. Она оценивалась на нескольких моделях умных часов, при различных положениях рук и в шумной обстановке. Результаты показали, что WatchHand может надёжно отслеживать движения пальцев и вращения запястья в различных условиях.

 Источник изображений: unsplash.com

Источник изображений: unsplash.com

Цель исследователей — сделать саму человеческую руку устройством ввода для взаимодействия с компьютерами и другими цифровыми системами, уменьшив зависимость от клавиатур, мышей и сенсорных экранов. «В будущем, благодаря такой технологии отслеживания движений рук, мы, возможно, сможем набирать текст с помощью одних только умных часов, — полагает аспирант Корнельского университета и соавтор исследования Чи-Джунг Ли (Chi-Jung Lee). — Наши руки могут выступать в качестве устройства ввода для компьютеров».

Технология может обеспечить работу с целым рядом приложений, включая управление компьютерами на основе жестов, системы дополненной и виртуальной реальности, а также вспомогательные инструменты для пользователей с ограниченной подвижностью или речью. «WatchHand существенно снижает барьеры для отслеживания положения рук, — подчеркнул аспирант KAIST и соавтор исследования Дживан Ким (Jiwan Kim). — Если у какого-либо устройства есть динамик и микрофон, наш подход применим».

Система обрабатывает все данные локально на умных часах, решая проблемы конфиденциальности, связанные с облачными системами отслеживания. Это также снижает задержку, обеспечивая взаимодействие в реальном времени без необходимости внешних вычислений. WatchHand основана на акустической подсистеме носимых устройств, что предполагает преимущества в энергоэффективности и точности по сравнению с системами на основе машинного зрения.

«WatchHand отражает более широкое видение моей лаборатории по превращению обычных носимых устройств в интеллектуальные платформы для отслеживания поведения, — заявил доцент Корнельского университета Ченг Чжан (Cheng Zhang). — С помощью простого обновления программного обеспечения мы потенциально можем разблокировать совершенно новые возможности на миллионах существующих устройств».

Однако у технологии пока есть ограничения. В настоящее время она работает только на умных часах на базе Android и испытывает трудности с поддержанием точности, когда пользователь находится в движении, например, при ходьбе. Исследователи работают над улучшением производительности в этих условиях. Результаты исследования будут представлены на конференции ACM CHI по человеческому фактору в вычислительных системах.


window-new
Soft
Hard
Тренды 🔥
«Просто идеально и сделано с душой»: моддеры впечатлили фанатов трейлером неофициального ремастера классической Fallout 17 мин.
NVIDIA ускорила эмуляцию FP64-вычислений на своих ИИ-чипах 4 ч.
ИИ-генератор аудио Suno научился создавать музыкальные клипы 4 ч.
Новая глава в истории Firaxis Games началась с массовых увольнений, а следующая XCOM в беде 4 ч.
Секретная сеть АНБ США дала сбой после обновления — это парализовало работу большинства сотрудников 4 ч.
Microsoft научила Windows окирпичивать украденные ноутбуки — файлы при этом не пострадают 13 ч.
Более 80 % серверов Exchange вышли из строя: Microsoft рассказала, как сама усугубила глобальный сбой Outlook 13 ч.
Microsoft представила семь ИИ-моделей: одни пишут и исправляют код, другие ищут уязвимости, редактируют изображения и общаются голосом 14 ч.
OpenAI представила две «жутко умные» модели ИИ — GPT-6.2 Astra для профи и GPT-6.2 Sol для повседневных дел 14 ч.
Apple тестирует лимиты для Siri AI — за дополнительные сложные запросы придётся платить 14 ч.
До 2 Тбайт и PCIe 4.0 x4: SSSTC представила М.2 SSD серии PQ2 для индустриальных приложений 33 мин.
2048 ядер в 2U: Giga Computing выпустила 2U4N-сервер H295-D80-CS1 с СЖО на базе AMD EPYC Venice 35 мин.
Boston Dynamics нашла новую работу для андроидов Atlas — они займутся выпуском чипов у GlobalFoundries 56 мин.
США перекрыли Китаю ещё одну лазейку к чипам Nvidia — азиатским дата-центрам запретили покупать ИИ-ускорители без разрешения Вашингтона 3 ч.
МТС впервые напрямую подключил смартфон к спутнику — но до полноценной спутниковой связи ещё далеко 3 ч.
Nvidia заявила, что не намерена возвращать Хуанга на пост гендиректора 4 ч.
«Мы со всем справимся»: Nvidia удвоила прибыль и выручку, а заодно повысила прогноз, несмотря на скандал и уход Хуанга 4 ч.
Отставка Хуанга не спасла Nvidia от неприятностей — Комиссия по ценным бумагам и биржам США запустила расследование 4 ч.
Компьютер LEO, открывший эпоху коммерческого применения вычислительной техники, отмечает 75-летие 4 ч.
Новая статья: Обзор игрового ноутбука GIGABYTE EAGLE 9MJ: новый средний класс 14 ч.