Facebook提出圆柱形外围设备,用于高速,精确地跟踪手指和拇指位置



原标题:Facebook提出圆柱形外围设备,高速,精确跟踪手指和拇指位置

佩戴VR头显示器后,用户通常看不到双手的存在。为了通过双手支持用户与虚拟环境的交互,有必要呈现肢体的存在。 VR系统可以使用手部跟踪系统来跟踪手的移动和位置并在虚拟环境中渲染它们。

但是,根据美国专利商标局颁发的授权专利,Facebook认为传统系统无法准确跟踪用户手指和拇指的位置,因此无法准确描述手的状态。因此,该公司提出了一种圆柱跟踪装置,用于高精度地跟踪和响应用户手势。

该专利文件陈述:“该专利系统包括:配置成根据显示指令显示一个或多个模拟对象的电子显示器;配置成捕获用户手部图像的成像传感器;以及控制台。控制台配置为基于捕获图像提取用户的手部关节信息并基于关节信息确定一个或多个手势。控制台根据确定的姿势更新显示指令。“

Facebook进一步解释说,为了实现精确捕获,成像设备可以通过各种方式从环境中捕获深度数据,例如使用传输网格图形的发射器,以及先进的计算机视觉算法。

控制台(圆柱形设备)可以包括应用程序商店,跟踪模块和执行引擎。其中描述的应用包括游戏应用,视频回放应用或其他合适的应用等。应用程序生成的内容可以响应从用户接收的输入。

控制台中的跟踪模块可以用一个或多个校准参数校准系统环境,并调整一个或多个校准参数以减少姿势判断错误的判断。此外,该系统可以与来自IMU组件的信息组合以帮助校准。

跟踪模块可以利用深度学习模型来确定用户的手势手势。该深度学习模型可以是神经网络,例如卷积神经网络,更具体地是残余神经网络。因此,控制台可以基于捕获的图像提取用户的手部关节信息,从而有助于准确地确定手部姿势。

Facebook进一步指出,通过这样的系统,“用户将能够执行导致模拟虚拟现实,增强现实和/或混合现实环境中的各种变化的手势。”

相关专利:通过三维方式对手势进行高分辨率跟踪和响应

2017年5月提交了题为“高分辨率跟踪和通过三维手势响应”的专利,最近由美国专利商标局批准。此外,这只是一项专利,仅代表Facebook在这方面进行探索,不确定他们是否会将特定发明商业化。

来源:英威网络

内容转自网络,版权归原作者所有,转载请以链接形式标明本文地址
本文地址:http://www.oohao123.com/a/qiyexinwen/2019/0421/1674.html