虚拟现实交互的方法及装置制造方法及图纸

本发明专利技术实施例提供一种虚拟现实交互的方法及装置，其中，本发明专利技术的方法主要包括：通过摄像头获取虚拟现实VR设备前方预设范围内的实体影像；识别所述实体影像中包含的手形；在当前虚拟现实图像中渲染出与所述手形对应的虚拟工具的图像，所述虚拟工具的图像中包含人手标识。与现有技术相比，本发明专利技术能够实现虚拟现实交互更加便利的效果。

【技术实现步骤摘要】

本专利技术实施例涉及计算机应用
，尤其涉及一种虚拟现实交互的方法及装置。
技术介绍
随着社会经济的发展，计算机已经成为人们生活不可或缺的重要组成部分，而友好的人机交互也早就成为人们非常关心的课题。从早期的命令界面到图形用户界面再到多媒体界面，直到现在的虚拟现实。人机交互已经发展到了一个新的领域。虚拟现实(Virtual Reality，简称VR)是利用计算机图形系统及各种现实控制等接口设备，在计算机上生成的、可交互的三维环境中提供沉浸感觉的技术。具体表现为：通过佩戴相应的头戴式显示器(Head-mounted Display，简称HMD)等VR设备，使用户的听觉和视觉功能完全置于虚拟的环境中并且切断所有的外界信息，从而使用户可以在虚拟现实中漫游，感受非常逼真的足以“迷惑”人类视觉的虚幻的世界。但正是由于在佩戴HDM后，切断了所有的外界信息，所以用户除了虚拟的图像外看不到真实环境中的任何事物，包括与VR设备对应的操作手柄等都只能盲操。为了解决盲操的问题，现有技术中提供了的解决方案为：在进行虚拟图像的渲染时，单独为用户的手臂及手建模，并渲染到虚拟的图像中，使用户可以在虚拟图像中看到自己的虚拟手臂及手。但是虚拟的手臂及手与实际的手臂及手的位置是高度统一的，通常只能实现一些抓取的动作等，对于一些更复杂的动作实现起来有很多的不便，显然现有技术中的VR交互方案不够合理。
技术实现思路
本专利技术实施例提供一种虚拟现实交互的方法及装置，用以解决现有的VR交互方案不合理的问题。本专利技术实施例提供一种虚拟现实交互的方法，所述方法包括：通过摄像头获取虚拟现实VR设备前方预设范围内的实体影像；识别所述实体影像中包含的手形；在当前虚拟现实图像中渲染出与所述手形对应的虚拟工具的图像，所述虚拟工具的图像中包含人手标识。本专利技术实施例提供一种虚拟现实交互的装置，所述装置包括：获取单元，用于通过摄像头获取虚拟现实VR设备前方预设范围内的实体影像；第一识别单元，用于识别所述实体影像中包含的手形；第一渲染单元，用于在当前虚拟现实图像中渲染出与所述手形对应的虚拟工具的图像，所述虚拟工具的图像中包含人手标识。本专利技术实施例提供的虚拟现实交互的方法及装置，能够首先由摄像头获取VR设备前方预设范围内的实体影像，然后识别出实体影像中包含的手形，最后在用户通过该VR设备看到的当前的虚拟现实图像中渲染出与手形对应的虚拟工具的图像，并且虚拟工具的图像中包含人手标识。与现有技术相比，本专利技术实施例能够通过摄像头获取VR设备前方的实体影像，并根据实体影像中包含的手形在虚拟图像中渲染出对应的带有人手标识的虚拟工具的图像，实现了将识别出的不同的手形转换为在虚拟现实图像中渲染不同的带有人手标识的虚拟工具的图像，然后可以进一步实现对虚拟工具的操作，使虚拟现实交互的方式更加的便利。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例提供的一种虚拟现实交互的方法的流程图；图2为本专利技术实施例提供的一种虚拟现实交互的装置的组成框图；图3为本专利技术实施例提供的另一种虚拟现实交互的装置的组成框图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于
本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。本专利技术实施例提供了一种虚拟现实交互的方法，如图1所示，该方法包括：101、通过摄像头获取虚拟现实VR设备前方预设范围内的实体影像。本实施例中的摄像头位于VR设备的前方，而安放在前方具体什么位置不作限定，但是摄像头捕获的范围必须包括用户手臂的活动范围。另外摄像头与VR设备的关系可以为：摄像头直接嵌在VR设备上作为VR设备的一个组成部分；或者摄像头作为一个独立装置，通过特定外部接口或者连接部件与VR设备组合。另外考虑到为了增加用户更好的沉浸感，有些情况可能需要在黑暗的环境中进行体验，因此摄像头还需具有夜视的功能，因此可以根据实际需要选择具有夜视功能的摄像头比如红外摄像头等。获取的实体影像主要是指佩戴VR设备的用户自己手臂及手当前的活动状态，获取实体影像是为了实时分析用户的手臂及手的形态，然后根据手臂及手的形态进行对应虚拟工具的渲染。102、识别实体影像中包含的手形。调取内置图像处理系统，使图像处理系统对由步骤101获取到的实体影像进行图像分析。具体包括：首先从实体影像中分离出人手的图像；然后对人手的图像呈现出的手形进行识别。手形主要是指由手指和/或手掌笔划出的不同的手势，比如“剪刀”型手势、“拳头”型手势等。另外，不同的情况下只能识别出特定的手势，特定的手势是提前预定义，只要进行了预定义的手势就可以被识别出。对于用户在体验不同的虚拟现实图像时，可以识别的特定的手势通常是根据具体体验的虚拟现实图像的内容设定的。103、在当前虚拟现实图像中渲染出与手形对应的虚拟工具的图像。当由步骤102识别出实体影像中的手形后，会根据手形在虚拟现实图像中渲染对应的虚拟工具的图像，其中虚拟现实图像是用户当前通过VR设备看到的虚拟图像。不同形状的手形分别对应不同的虚拟工具，手形与虚拟工具之间的对应关系是预先定义的。比如“剪刀”型手势对应虚拟工具“剪刀”；“锤头”型手势对应虚拟工具“锤子”等。另外渲染出的虚拟工具的图像中带有人手标识，即呈现出人手持工具的模式，人手标识可以是任意形态的标
识，比如机械臂图像、怪兽手图像、或任意图像等。人手标识与具体的手形没有对应的关系，不受手形的约束。本专利技术实施例提供的虚拟现实交互的方法，能够首先由摄像头获取VR设备前方预设范围内的实体影像，然后识别出实体影像中包含的手形，最后在用户通过该VR设备看到的当前的虚拟现实图像中渲染出与手形对应的虚拟工具的图像，并且虚拟工具的图像中包含人手标识。与现有技术相比，本专利技术实施例能够通过摄像头获取VR设备前方的实体影像，并根据实体影像中包含的手形在虚拟图像中渲染出对应的带有人手标识的虚拟工具的图像，实现了将识别出的不同的手形转换为在虚拟现实图像中渲染不同的带有人手标识的虚拟工具的图像，然后可以进一步实现对虚拟工具的操作，使虚拟现实交互的方式更加的便利。进一步的，为了对图1所示实施例的细化及扩展，本专利技术实施例对图1中的步骤进行细化和补充，如下：为了进一步对渲染出的虚拟工具进行操作，在图1步骤103之后，继续识别实体影像中人手的位置信息，然后将识别出的位置信息转换为对应实体影像中包含的手形对应的虚拟工具的操作命令。具体的人手的位置信息包括：手腕的朝向(向上、向下等)，不同的朝向代表虚拟工具的朝向，比如虚拟工具为枪时，不同的朝向就代表枪口瞄准的方向；具体某个或某几个手指位置的变化，比如当识别出的手形对应的虚拟工具为枪时，手指位置的变化(比如食指弯曲等)代表执行开枪的命令，再比如识别出的手形对应本文档来自技高网...

【技术保护点】
一种虚拟现实交互的方法，其特征在于，所述方法包括：通过摄像头获取虚拟现实VR设备前方预设范围内的实体影像；识别所述实体影像中包含的手形；在当前虚拟现实图像中渲染出与所述手形对应的虚拟工具的图像，所述虚拟工具的图像中包含人手标识。

【技术特征摘要】
1.一种虚拟现实交互的方法，其特征在于，所述方法包括：通过摄像头获取虚拟现实VR设备前方预设范围内的实体影像；识别所述实体影像中包含的手形；在当前虚拟现实图像中渲染出与所述手形对应的虚拟工具的图像，所述虚拟工具的图像中包含人手标识。2.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：在渲染出所述虚拟工具的图像后，识别所述实体影像中人手的位置信息；将所述位置信息转换为所述虚拟工具的操作命令。3.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：若所述手形对应多个虚拟工具，则接收用户选择的工具标识，所述工具标识用于区别所述多个虚拟工具；根据用户选择的工具标识在所述虚拟现实图像中渲染出对应的虚拟工具的图像。4.根据权利要求1所述的方法，其特征在于，所述识别所述实体影像中包含的手形，包括：获取所述实体影像中包含的手形；将获取到的手形与手形数据库中的预设手形图像进行比对。5.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：识别所述实体影像中手持实物；根据所述实物的形态特征在所述虚拟现实图像中渲染出对应的虚拟工具的图像。6.一种虚拟现实交互的装置，其特征在于，所述装置包括：获取单元，用于通过摄像头获取虚拟现...

【专利技术属性】
技术研发人员：贾旭，
申请(专利权)人：乐视控股北京有限公司，乐视致新电子科技天津有限公司，
类型：发明
国别省市：北京;11