цифровая электроника
вычислительная техника
встраиваемые системы

 
» » Новое носимое устройство ощущает положение рук даже сквозь предметы

Новое носимое устройство ощущает положение рук даже сквозь предметы

Автор: Mike(admin) от 25-07-2020, 05:05

Исследователи из Корнелла и Висконсинского университета разработали устройство FingerTrak, устанавливаемое на запястье, которое позволяет количественно определять и регистрировать полное и сложное положение всей человеческой руки без необходимости непосредственно видеть пальцы. Вместо этого контур руки выводятся из запястья посредством использования четырех крошечных тепловизоров низкого разрешения с помощью искусственного интеллекта.


Новое носимое устройство ощущает положение рук даже сквозь предметы

Система передает изображения, полученные с тепловизионных камер, в глубокую нейронную сеть, настроенную для «сшивания» изображений вместе, чтобы оценить 20 совместных положений в трехмерном пространстве. Хотя сама SciFi Lab участвует в нескольких проектах, связанных с взаимодействиями человек-машина, связанными с человеческой рукой, FingerTrak является заметной вехой. Что делает эту систему уникальной, так это то, что впервые контуры запястья используются для восстановления полного положения руки.


Документ, описывающий результаты работы, «FingerTrak: Continuous 3D Hand Pose Tracking by Deep Learning Hand Silhouettes Captured by Miniature Thermal Cameras on Wrist», был опубликован в трудах Ассоциации вычислительной техники на интерактивных, мобильных, носимых и вездесущих технологии.


Предыдущие установки камер для запястья для отслеживания движений рук зависели от использования камер для непосредственного захвата положения пальцев. Они оказались слишком громоздкими, чтобы иметь практическое применение, и в любом случае могли собирать только ограниченную информацию. Напротив, FingerTrak использует диаду тепловизора и машинного обучения, чтобы фактически реконструировать руку.



Устройство построено вокруг четырех тепловизоров размером с горошину, каждая чуть больше трети дюйма, которые делают несколько изображений «силуэтов» для формирования контура руки. Эти изображения затем передаются в пользовательскую глубокую нейронную сеть, которая восстанавливает виртуальный 3D-рендеринг всей руки. С помощью FingerTrack можно получить трехмерное изображение всей позы руки, даже когда рука держит реальный физический объект.


FingerTrak доказал свою способность непрерывно восстанавливать все положения рук, состоящие из 20 положений суставов пальцев, без необходимости изображения всех пальцев. Скорее, система могла оценить всю позу руки, наблюдая только контур руки, с точки зрения запястья, используя тепловые камеры с низким разрешением (32 x 24).




© digitrode.ru


Теги: носимая электроника




Уважаемый посетитель, Вы зашли на сайт как незарегистрированный пользователь.
Мы рекомендуем Вам зарегистрироваться либо войти на сайт под своим именем.

Комментарии:

Оставить комментарий