Сегодня 19 ноября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → движения

Исследователи c помощью ИИ превратили обычные умные часы в систему точного отслеживания движений руки

Учёные из Корнельского университета и Корейского института передовых технологий (KAIST) разработали систему WatchHand, которая при помощи искусственного интеллекта превращает обычные умные часы в устройство отслеживания движений рук. WatchHand работает в режиме реального времени, использует встроенный динамик и микрофон стандартных умных часов и не требует никакого дополнительного оборудования.

 Источник изображения: Jason Koski / Cornell University

Источник изображения: Jason Koski / Cornell University

Принцип работы системы заключается в излучении неслышимых звуковых волн из динамика умных часов. Отражённые волны считываются микрофоном устройства, создавая эхо-профиль. Алгоритм машинного обучения обрабатывает эти данные непосредственно на устройстве для оценки положения руки в трёх измерениях.

В отличие от существующих носимых систем отслеживания движений рук, которые полагаются на камеры или громоздкие внешние датчики, WatchHand не требует дополнительного оборудования. Это делает систему значительно более практичной для повседневного использования и масштабируемой для миллионов существующих устройств.

Система была протестирована на 40 участниках в четырёх отдельных исследованиях, собрав около 36 часов данных о жестах. Она оценивалась на нескольких моделях умных часов, при различных положениях рук и в шумной обстановке. Результаты показали, что WatchHand может надёжно отслеживать движения пальцев и вращения запястья в различных условиях.

 Источник изображений: unsplash.com

Источник изображений: unsplash.com

Цель исследователей — сделать саму человеческую руку устройством ввода для взаимодействия с компьютерами и другими цифровыми системами, уменьшив зависимость от клавиатур, мышей и сенсорных экранов. «В будущем, благодаря такой технологии отслеживания движений рук, мы, возможно, сможем набирать текст с помощью одних только умных часов, — полагает аспирант Корнельского университета и соавтор исследования Чи-Джунг Ли (Chi-Jung Lee). — Наши руки могут выступать в качестве устройства ввода для компьютеров».

Технология может обеспечить работу с целым рядом приложений, включая управление компьютерами на основе жестов, системы дополненной и виртуальной реальности, а также вспомогательные инструменты для пользователей с ограниченной подвижностью или речью. «WatchHand существенно снижает барьеры для отслеживания положения рук, — подчеркнул аспирант KAIST и соавтор исследования Дживан Ким (Jiwan Kim). — Если у какого-либо устройства есть динамик и микрофон, наш подход применим».

Система обрабатывает все данные локально на умных часах, решая проблемы конфиденциальности, связанные с облачными системами отслеживания. Это также снижает задержку, обеспечивая взаимодействие в реальном времени без необходимости внешних вычислений. WatchHand основана на акустической подсистеме носимых устройств, что предполагает преимущества в энергоэффективности и точности по сравнению с системами на основе машинного зрения.

«WatchHand отражает более широкое видение моей лаборатории по превращению обычных носимых устройств в интеллектуальные платформы для отслеживания поведения, — заявил доцент Корнельского университета Ченг Чжан (Cheng Zhang). — С помощью простого обновления программного обеспечения мы потенциально можем разблокировать совершенно новые возможности на миллионах существующих устройств».

Однако у технологии пока есть ограничения. В настоящее время она работает только на умных часах на базе Android и испытывает трудности с поддержанием точности, когда пользователь находится в движении, например, при ходьбе. Исследователи работают над улучшением производительности в этих условиях. Результаты исследования будут представлены на конференции ACM CHI по человеческому фактору в вычислительных системах.


window-new
Soft
Hard
Тренды 🔥
13 лет ожиданий подошли к концу: на PS5, Xbox Series X и S вышла GTA VI 9 ч.
В Nginx нашли две критические дыры — хакеры могут захватить сервер без пароля 10 ч.
Хакеры поставили Nvidia на счётчик и грозят утечкой данных — но доказательств взлома нет 10 ч.
«Уже знаю, во что буду играть завтра»: Devolver устроила бесплатную раздачу конкурента GTA VI для тех, кто удалит GTA VI 11 ч.
Nvidia скопировала баг AMD: драйверы GeForce тоже начали чрезмерно нагружать SSD 12 ч.
«Проект Гриффиндор»: стало известно о секретном плане Meta по вовлечению школьников в Instagram 12 ч.
«Вкус будущего»: эксперты Digital Foundry остались впечатлены графикой GTA VI, но не производительностью 13 ч.
OpenAI GPT-6 Cyber взломала iPhone и практически все остальные устройства Apple 14 ч.
Sony подтвердила прошивку, которая нужна для GTA VI на PS5 — пираты пока отстают 15 ч.
Huawei похвасталась, что число пользователей HarmonyOS превысило 100 млн 15 ч.
Phison представила космические SSD Pascari Space 7 ч.
Новая статья: Обзор системы жидкостного охлаждения Ocypus Omega L36 Ultra Eng Limited: ультрамегасуперэксклюзив 9 ч.
Lenovo готовит бюджетную портативную консоль Legion Go Beam без тачпадов и съёмных контроллеров 9 ч.
Vulcan сразил топливный голод — ULA установила предварительную причину аварии ракеты со спутниками Amazon Leo 10 ч.
Инженеры угрожают новому руководству Nvidia увольнениями, если Хуанг не вернётся на пост гендира 10 ч.
Даже удвоение прибыли не спасло Nvidia: акции компании снова пошли вниз, потянув за собой весь ИИ-сектор 11 ч.
Arista представила обновление платформ R4 и оптическое оборудование для распределённых ИИ-систем 11 ч.
Золото, титан, крокодил и эмаль: российская Caviar выпустила коллекцию люксовых гаджетов в стиле GTA VI 11 ч.
AMD проведёт презентацию на CES 2027 — в анонсе усмотрели намёки на Ryzen с Zen 6 или новые Radeon 12 ч.
Призывы замедлить гонку ИИ оказались балабольством — и продажи Nvidia и AMD это подтверждают 12 ч.