Facebook подал заявку на патент на повязку, которая выполняет отслеживание пальцев, считывая электрические сигналы внутри запястья пользователя. Машинное обучение используется для преобразования этих сигналов в положения пальцев.
Описаны два варианта устройства. В одном из них активный сигнал посылается через запястье. На основании того, как изменяется сигнал, проходящий через сухожилия и мышцы руки, можно определить их положение.
В другом варианте активный сигнал не передается. Вместо этого устройство непосредственно считывает импеданс плеча без сигнала зонда.
Однако Facebook, похоже, не единственная компания, работающая над этой интересной концепцией. Базирующаяся в Нью-Йорке CTRL-Labs разместила на YouTube видео похожей повязки:
Возможность прямого использования каждого из ваших пальцев добавляет совершенно новый уровень интерактивности в виртуальную реальность. Однако эта возможность отсутствует практически на всех потребительских VR-гарнитурах. Компания Leap Motion поставила комплект для отслеживания пальцев для Oculus DK2 еще в 2014 году, но качество отслеживания оставляло желать лучшего.
Facebook уже активно занимается оптическим отслеживанием пальцев. HTC объявила об отслеживании пальцев для Vive Pro в конце прошлого года, но это еще не было сделано, и качество отслеживания в настоящее время неизвестно.
Если устройство, описанное в патенте, действительно работает, оно может обеспечить отслеживание пальцев в виртуальной реальности без необходимости выполнять энергоемкую обработку на нескольких камерах, направленных на ваши пальцы. Кроме того, поскольку он не зависит от камер, отслеживание будет работать под всеми углами независимо от ориентации гарнитуры.