用于识别虚拟现实头戴装置中的手势的设备和方法制造方法及图纸

一种VR设备包括：检测器，其包括第一视觉传感器和第二视觉传感器；以及控制器，其与所述检测器操作地耦合。所述控制器被配置为通过第一视觉传感器识别第一对象；并且基于通过第二视觉传感器识别出的第二对象来确定所述识别出的第一对象是否是所述VR设备的用户的对象。

【技术实现步骤摘要】
用于识别虚拟现实头戴装置中的手势的设备和方法
本申请总体上涉及虚拟现实(VR)头戴装置，并且更具体地说，涉及用于识别VR头戴装置的用户的手势的设备和方法。
技术介绍
本领域需要一种改善的设备和方法，用于识别虚拟现实(VR)头戴装置的用户的手势，以便使VR头戴装置的用户之外的入侵者的影响最小化。
技术实现思路
为解决现有技术的以上讨论的缺陷，主要目的是提供一种被配置为由用户佩戴的虚拟现实(VR)头戴装置。在本公开的优选实施例中，VR头戴装置包括：i)前视视觉传感器，其用于检测VR头戴装置的前向视场中的对象；ii)下视视觉传感器，其用于检测VR头戴装置的向下视场中的对象；iii)控制器，其耦合到前视视觉传感器和下视视觉传感器。控制器被配置为：a)检测通过前视视觉传感器捕捉的第一图像中的手部；b)检测通过下视视觉传感器捕捉的第二图像中的用户的臂部；并且c)确定在第一图像中检测到的手部是否是用户的手部。在一个实施例中，控制器通过将在第一图像中检测到的手部的相对位置与在第二图像中检测到的用户的臂部的相对位置进行比较来确定在第一图像中检测到的手部是否是用户的手部。在另一个实施例中，控制器通过将在第一图像中检测到的手部的相对移动与在第二图像中检测到的用户的臂部的相对移动进行比较来确定在第一图像中检测到的手部是否是用户的手部。在又一个实施例中，控制器通过将在第一图像中检测到的手部的相对排列与在第二图像中检测到的用户的臂部的相对排列进行比较来确定在第一图像中检测到的手部是否是用户的手部。VR设备包括：检测器，其包括第一视觉传感器和第二视觉传感器；以及控制器，其与检测器操作地耦合。控制器被配置为通过第一视觉传感器来识别第一对象；并且基于通过第二视觉传感器识别出的第二对象来确定识别出的第一对象是否是VR设备的用户的对象。一种操作VR设备的方法包括：通过第一视觉传感器来识别第一对象；以及基于通过第二视觉传感器识别出的第二对象来确定识别出的第一对象是否是VR设备的用户的对象。在进行以下详细描述之前，阐明遍及本专利文档使用的某些词语和短语的定义可能是有利的：术语“包括”和“包含”以及其衍生词意味着没有限制的包括；术语“或”是包括的，意指和/或；短语“与……相关联”和“与其相关联”以及其衍生词可以意指包括、被包括在……内、与……互连、包含、被包含在……内、连接到或与……连接、耦合到或与……耦合、与……可通信、与……协同、交错、并列、接近于、结合到或与……结合、具有、具有……属性等；以及术语“控制器”意指控制至少一个操作的任何装置、系统或其一部分，这种装置可以硬件、固件或软件、或上述中的至少两者的某种组合来实现。应当注意的是，不论是本地或远程，与任何特定控制器相关联的功能可以是集中式的或分布式的。贯穿本专利文档提供某些词语和短语的定义，本领域普通技术人员应当理解，在许多(如果不是大多数)实例中，此类定义适用于如此定义的词语和短语的先前使用和未来使用。附图说明为了更完整地理解本公开和其优点，现在参考结合附图的以下描述，其中相同参考标号表示相同部分：图1A是根据本公开的一个实施例的虚拟现实(VR)头戴装置的透视图。图1B是根据本公开的一个实施例的VR头戴装置的前视图。图2示出根据本公开的一个实施例的VR头戴装置的手势检测操作。图3示出在根据本公开的一个实施例的VR头戴装置的前视视觉传感器的视场中检测到的手部和在下视视觉传感器的视场中检测到的臂部。图4是根据本公开的一个实施例的VR头戴装置的示意性方框图。图5是示出根据本公开的一个实施例的VR头戴装置的操作的流程图。图6是根据本公开的一个实施例的用于确定识别出的手部是否是VR头戴装置的用户的对象的流程图。图7是根据本公开的一个实施例的用于忽略VR头戴装置的用户之外的入侵者的手势的流程图。图8是根据本公开的一个实施例的用于确定是否允许VR头戴装置的用户之外的入侵者的姿势的流程图。具体实施方式下文讨论的图1A至图8以及用于在本专利文档中描述本公开的原理的各种实施例仅仅是举例说明，并且不应当以任何方式被解释为限制本公开的范围。本领域技术人员将理解的是，本公开的原理可以在任何适当安排的虚拟现实头戴装置中实现。在以下的本公开中，短语“虚拟现实”将一般地用于虚拟现实和增强现实两者，以便简化下面的描述。另外，除非另外指明，否则以下术语具有以下含义：i)“视觉传感器”是指任何摄像机(例如，RGB相机)、深度传感器或运动检测电路设备；ii)“主用户”或“用户”是指实际佩戴和操作虚拟现实(VR)头戴式显示器(HMD)或头戴装置的人；以及iii)“入侵者”是指用户之外的任何人，他们的手势在HMD/头戴装置的VR用户界面上有意或无意地触发不希望的影响。图1A是根据本公开的一个实施例的VR头戴装置100的透视图。图1B是根据本公开的一个实施例的VR头戴装置100的前视图。VR头戴装置100包括底座(或外壳)105、前向视觉传感器100、头部绑带120、以及向下视觉传感器130。底座105容纳VR头戴装置100的电子件(electronics)。用户将VR头戴装置100放置在他或她的头部上并且系紧头部绑带120以将VR头戴装置100保持在适当位置。前向视觉传感器110捕捉前向视场(FOV)150并且在VR头戴装置100的内部显示器上显示前向FOV150。用户随后可在内部显示器上观看前向FOV150中的任何对象。当VR头戴装置100的前向视觉传感器110和内部处理器出于确定手势的目的而检测到前向FOV150中的手部时，可能难以确定该手部属于主用户还是入侵者。有必要防止来自入侵者的手势对用户界面造成不希望的干扰。本公开提供一种通过使用向下视觉传感器130(其捕捉向下FOV160)来区分真正(legitimate)用户手势和入侵者手势的方法。VR头戴装置100的向下视觉传感器130和内部处理器可操作来检测并识别向下FOV160中的用户臂部，并且随后将用户手部移动与用户臂部移动相关和/或相关联。以此方式，VR头戴装置100能够确定在前向FOV150中检测到的手部是属于VR头戴装置100的真正用户还是入侵者。一旦进行了此确定，VR头戴装置100的内部处理器将只处理来自用户的手势命令并且将忽略来自入侵者的手势。图2示出根据本公开的一个实施例的VR头戴装置100的手势检测操作。在图2中，用户向前伸展她的臂部和手部以与虚拟世界中的对象交互。前向视觉传感器110检测前向FOV150中的用户手部210，并且向下视觉传感器130检测向下FOV160中的用户臂部220。VR头戴装置110随后通过将用户手部210与用户臂部220的排列和/或位置进行比较来确定用户手部210是否属于用户。VR头戴装置110还可通过将用户手部210与用户臂部220的相对移动进行比较来确定用户手部210是否属于用户。追踪的移动可以包括手部和臂部的左右(横向)移动、手部和臂部的上下(垂直)移动和/或手部和臂部远离或朝向用户身体的前向后向(伸展)移动。图3示出在根据本公开的一个实施例的VR头戴装置100的前向视觉传感器110的前向FOV150中检测到的手部310和320以及在向下视觉传感器130的向下FOV160中检测到的臂部311和321。通常，用户将只能在本文档来自技高网...

【技术保护点】
一种虚拟现实(VR)设备，包括：检测器，其包括第一视觉传感器和第二视觉传感器；以及控制器，其与所述检测器操作地耦合，其中所述控制器被配置为：通过所述第一视觉传感器识别出第一对象；并且基于通过所述第二视觉传感器识别出的第二对象来确定识别出的第一对象是否是所述VR设备的用户的对象。

【技术特征摘要】
2016.03.04 KR 10-2016-0026357;2015.12.29 US 14/9821.一种虚拟现实(VR)设备，包括：检测器，其包括第一视觉传感器和第二视觉传感器；以及控制器，其与所述检测器操作地耦合，其中所述控制器被配置为：通过所述第一视觉传感器识别出第一对象；并且基于通过所述第二视觉传感器识别出的第二对象来确定识别出的第一对象是否是所述VR设备的用户的对象。2.如权利要求1所述的VR设备，其中所述控制器被配置为：通过所述第一视觉传感器捕捉包括第一对象的图像，并且从所捕捉的图像识别出第一对象。3.如权利要求2所述的VR设备，其中所述控制器被配置为：通过第二视觉传感器捕捉包括第二对象的图像，并且从所捕捉的图像识别出第二对象。4.如权利要求3所述的VR设备，其中所述控制器被配置为基于识别出的第一对象和识别出的第二对象的相对位置、相对移动以及相对排列中的至少一者来确定所述识别出的第一对象是否是用户的对象。5.如权利要求1所述的VR设备，其中所述控制器进一步被配置为：通过第一视觉传感器识别出属于用户之外的第三方的第三对象，并且基于所述识别出的第二对象和识别出的第三对象来确定所述识别出的第一对象是否是用户的对象。6.如权利要求5所述的VR设备，其中所述控制器被配置为基于所述识别出的第二对象和所述识别出的第三对象的相对位置、相对移动以及相对排列中的至少一者来确定所述识别出的第三对象是否是用户的对象。7.如权利要求6所述的VR设备，其中如果所述识别出的第一对象是用户的对象，则所述控制器进一步被配置为识别所...

【专利技术属性】
技术研发人员：G斯里瓦斯塔瓦，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR