Facebook提出圆柱体外设，高速、精确追踪手指、拇指位置

　　在穿戴VR头显后，用户一般无法看到双手的存在。为了支持用户通过双手与虚拟环境交互，有必要渲染所述肢体的临在。VR系统可以利用手部追踪系统来追踪双手的运动和位置，进而在虚拟环境中渲染它们。

　　但根据美国专利商标局日前公布的一份授权专利，Facebook认为传统的系统无法精确追踪用户手指和拇指的位置，因此无法精确描述手部的状态。所以，这家公司提出了一种用以高精度追踪和响应用户手势的圆柱形追踪设备。

　　专利文件概述道：“专利描述的系统包括：电子显示器，其配置为根据显示指令显示一个或多个模拟对象;成像传感器，配置为捕获用户手部图像;以及控制台。控制台配置为根据捕获图像提取用户的手部关节信息，并根据所述关节信息确定一个或多个姿势。根据确定的姿势，控制台更新显示指令。”

　　Facebook进一步解释说，为了实现精确的捕获，成像设备可以通过各种方法来捕获环境的深度数据，如利用发射网格图形的发射器，以及先进的计算机视觉算法。

　　所述的控制台(圆柱形设备)可以包含应用储存，追踪模块，以及执行引擎。其中所述的应用包括游戏应用，视频播放应用或其他合适的应用程序等等。由应用程序生成的内容可以响应于从用户接收的输入。

　　控制台中的追踪模块可以利用一个或多个校准参数校准系统环境，并调整一个或多个校准参数，从而减少判断姿势判断误差。另外，系统可以结合IMU组件的信息来帮助校准。

　　追踪模块可以利用深度学习模型来判断用户手势姿态。这一深度学习模型可以是神经网络，如卷积神经网络，更具体来说是残差神经网络。因此，控制台可以根据捕获图像提取用户的手部关节信息，从而帮助精确判断手部姿态。

　　Facebook进一步指出，利用这样的系统，“用户将能执行导致模拟虚拟现实，增强现实，和/或混合现实环境中出现各种变化的手势。”

　　相关专利：High Resolution Tracking And Response To Hand Gestures Through Three Dimensions

　　名为“High Resolution Tracking And Response To Hand Gestures Through Three Dimensions(三维手势的高分辨率追踪与响应)”的专利是于2017年5月提交，并于日前由美国专利商标局获批公布。另外，这仅仅只是一份专利，仅代表Facebook朝这一方向进行了探索，尚不确定他们是否会或将于何时商业化具体的发明。