用于人工现实系统的拐角识别手势驱动的用户界面元素选通技术方案

描述了一种人工现实系统，其在人工现实环境中渲染、呈现和控制用户界面元素，并响应于检测到的用户的一个或更多个手势来执行动作。该人工现实系统包括图像捕获设备、头戴式显示器(HMD)、手势检测器、用户界面(UI)引擎和渲染引擎。图像捕获设备捕获代表物理环境的图像数据。HMD输出人工现实内容。手势检测器从图像数据中识别包括手的构形的手势，该手在至少阈值时间段内基本静止并且被定位成使得手的食指和拇指形成近似直角。UI引擎响应于所识别的手势生成UI元素。渲染引擎将UI元素渲染为对人工现实内容的叠加。现实内容的叠加。现实内容的叠加。

【技术实现步骤摘要】
【国外来华专利技术】用于人工现实系统的拐角识别手势驱动的用户界面元素选通
[0001]相关申请的交叉引用
[0002]本申请要求2019年6月7日提交的美国申请第16/435,079号的优先权，该申请的内容为了所有目的通过引用以其整体并入本文。


[0003]本公开总体上涉及人工现实系统，例如虚拟现实、混合现实、增强现实和/或其他计算机介导的现实系统(computer
‑
mediated reality system)，且更具体地，涉及人工现实系统的用户界面。
[0004]背景
[0005]人工现实系统正变得越来越普遍，应用于许多领域，诸如计算机游戏、健康和安全、工业和教育。作为几个示例，人工现实系统正在被合并到移动设备、游戏机、个人计算机、电影院和主题公园中。通常，人工现实是在呈现给用户之前已经以某种方式调整的现实的形式，其可包括例如虚拟现实(VR)、增强现实(AR)、混合现实(MR)、混杂现实(hybrid reality)、或其某种组合和/或衍生物。
[0006]典型人工现实系统包括用于渲染和向用户显示内容的一个或更多本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种人工现实系统，包括：图像捕获设备，其被配置为捕获代表物理环境的图像数据；头戴式显示器(HMD)，其被配置为输出人工现实内容；手势检测器，其被配置为：从所述图像数据识别手势，所述手势包括手在至少阈值时间段内基本静止并且被定位成使得所述手的食指和拇指形成近似直角的构形；用户界面(UI)引擎，其被配置为响应于所识别的手势生成UI元素；和渲染引擎，其被配置为将所述UI元素渲染为对所述人工现实内容的叠加。2.根据权利要求1所述的人工现实系统，其中，所述手的定位是所述手的第一定位，其中，所识别的手势是第一手势，其中，为了生成所述UI元素，所述UI引擎被配置成生成所述UI元素以符合由所述第一手势指示的第一取向，其中，所述手势检测器还被配置成：从所述图像数据识别所述手的第二定位，以及识别由手势库中与所述手的第二定位匹配的另一条目表示的第二手势；其中，所述UI引擎还被配置为修改所述UI元素以符合基于所识别的第二手势的第二取向，并且其中，所述渲染引擎还被配置为根据所述第二取向渲染所述UI元素。3.根据权利要求2所述的人工现实系统，其中，所述第二手势表示相对于所述第一手势的90度手旋转和180度手映像；和/或优选地，其中，所述第一UI取向是纵向取向，并且其中，所述第二UI取向是横向取向；和/或优选地，其中所述第一UI取向包括包含在所述第二UI取向中的用户可选选项的子集。4.根据权利要求1、权利要求2或权利要求3所述的人工现实系统，其中，所识别的手势指示所述UI元素的左下角的位置和所述UI元素在所述人工现实内容中的取向；并且优选地，其中由从所述图像数据中识别的所述手的食指和拇指形成的直角的拐角指示所述UI的左下角在所述人工现实内容中的位置；和/或优选地，其中从所述图像数据识别的所述手的食指的定位指示所述UI在所述人工现实内容中的取向，其中，所述UI的长边基本上与所述手的食指对齐。5.根据权利要求1至4中任一项所述的人工现实系统，其中，为了识别包括在至少所述阈值时间段内基本静止并且被定位成使得所述手的食指和拇指形成近似直角的手的手势，所述手势检测器被配置成将所述手势识别为由手势库中的条目表示。6.根据权利要求1至5中任一项所述的人工现实系统，其中，所述图像捕获设备集成在所述HMD内。7.一种方法，包括：由头戴式显示器(HMD)输出人工现实内容；由所述HMD捕获代表物...

【专利技术属性】
技术研发人员：乔纳森，
申请(专利权)人：脸谱科技有限责任公司，
类型：发明
国别省市：