使用腕式摄像机进行3D手部姿态估计

能够追踪手势在前进中至关重要增强现实(AR)和虚拟现实(VR)这些设备已经开始在医疗、体育和娱乐领域有很大的需求。到目前为止，这些设备使用的是笨重的数据手套，这往往会阻碍自然运动，或传感器范围有限的控制器。

现在，由东京工业大学Hideki Koike领导的一个研究小组设计出了一款基于摄像头的腕式手表3 d手势识别系统，在未来可以与一个smartwatch．他们的系统可以在移动设置中捕捉手部动作。研究人员说:“这项工作是第一个基于视觉的实时3D手部姿态估计器，它使用了来自手背区域的视觉特征。”该系统由摄像机组成神经网络它被命名为DorsalNet，可以通过检测手背的变化来准确估计3D手的姿势。

研究人员证实，他们的系统在识别动态手势方面比之前的工作提高了20%，在检测11种不同的抓握类型方面的准确率达到了75%。

这项工作可以推动支持徒手交互的控制器的发展。在初步测试中，研究人员证明，他们的系统可以用于智能设备的控制，例如，只需改变手指的角度，就可以改变智能手表上的时间。他们还展示了将该系统用作虚拟鼠标或键盘的可能性，例如，通过旋转手腕来控制指针的位置，以及使用一个简单的8键键盘进行输入。

他们指出，该系统还需要进一步的改进，比如使用更高帧率的摄像头来捕捉手腕的快速运动，以及能够处理更多样的光照条件，这些都将在现实世界中得到应用。