一种用于虚拟现实设备的手势识别控制方法技术

本发明专利技术公开了一种用于虚拟现实设备的手势识别控制方法，虚拟现实设备包括多个3D深度摄像机及控制器，方法包括建立手部的骨架和三维模型，深度摄像机对手部进行跟踪，并对手部骨架模型进行优化，进而控制三维模型的变形，进一步根据三维模型变形信息，快速实时地检测手部与环境发生的交互作用，实现用户与虚拟环境的互动。本发明专利技术的方法降低了虚拟现实设备的手势控制过程中的计算量，提高手势理解的精度，实现了用户与虚拟环境快速逼真的互动作用。

Gesture recognition control method for virtual reality device

The invention discloses a control method for gesture recognition, virtual reality equipment, virtual reality equipment comprises a plurality of 3D depth camera controller and method, including the establishment of hand skeleton and 3D model, the depth camera hand tracking, and skeleton model to optimize and control the deformation of the opponent, the 3D model according to the deformation the 3D information model, interaction between the hand and the environment of rapid detection in real time, realizes the interaction between the user and the virtual environment. The method of the invention reduces the amount of computation in the gesture control process of the virtual reality device, improves the accuracy of gesture understanding, and realizes the fast and lifelike interaction between the user and the virtual environment.

【技术实现步骤摘要】
一种用于虚拟现实设备的手势识别控制方法
本专利技术属于虚拟现实
，具体来说涉及一种用于虚拟现实设备的手势识别控制方法。
技术介绍
在虚拟维修应用中，人机之间的交互性尤为重要。基于视觉的体感交互是人机交互的重要技术之一，也是最自然的人机交互手段之一，其使用人手、身体的位置、方向和姿态作为计算机的输入方式，使输入空间和输出空间一体化，实现虚拟和真实环境对象的相互操作一致性，因此体感交互也逐渐成为虚拟维修中交互命令输入的关键技术。体感交互中很重要的一部分就是手势交互。手势分析和交互的研究最早可追溯到上世纪80年代。Grimes于AT&T在1983年最先取得了“数字数据手套”专利。利用数据手套，可直接获取手部关节形状特征和位置、运动轨迹等时空特征信息。早期的手势/手语识别的研究通常都是基于数据手套的，然而由于需要佩戴设备、交互不便并且价格昂贵，因此大部分研究人员渐渐的都将研究的重点放到基于视觉的手势交互上。由于手势本身就是一种视觉语言，因此基于视觉的手势交互也更加符合人的“所见即所得”的认知期望。为简化手势检测、分析问题，研究人员借助有颜色标记的手套，使得手的运动转化为图像序列本文档来自技高网...

【技术保护点】
一种用于虚拟现实设备的手势识别控制方法，所述虚拟现实设备包括多个3D深度摄像机及控制器，所述多个3D深度摄像机从不同维度获得手部的深度图像，控制器从3D深度摄像机获得深度图像信息并根据所获得的信息对手部进行跟踪，恢复手部模型并对手势进行理解，其特征在于，所述方法包括：1)选取手部关键点，建立手部的骨架模型，并且建立三维模型，且在此手部三维模型的基础上选取特征点；2)采用多个3D深度摄像机对手部进行跟踪，获得双手的初始像素信息，并将像素信息与上述骨架模型上的关键点进行匹配，获取准确的初始关键点位置；3)持续对手部进行跟踪，获得获得关键点的坐标，对手部的骨架模型进行优化，并根据所获得的参数信息获取...

【技术特征摘要】
1.一种用于虚拟现实设备的手势识别控制方法，所述虚拟现实设备包括多个3D深度摄像机及控制器，所述多个3D深度摄像机从不同维度获得手部的深度图像，控制器从3D深度摄像机获得深度图像信息并根据所获得的信息对手部进行跟踪，恢复手部模型并对手势进行理解，其特征在于，所述方法包括：1)选取手部关键点，建立手部的骨架模型，并且建立三维模型，且在此手部三维模型的基础上选取特征点；2)采用多个3D深度摄像机对手部进行跟踪，获得双手的初始像素信息，并将像素信息与上述骨架模型上的关键点进行匹配，获取准确的初始关键点位置；3)持续对手部进行跟踪，获得获得关键点的坐标，对手部的骨架模型进行优化，并根据所获得的参数信息获取手部外形信息和手部特征信息，应用于手部三维模型，控制手部三维模型的变形；4)根据所获得的手部三维模型变形信息，快速实时地检测手部与环境发生的交互作用，实现用户与虚拟环境的互动。2.如权利要求1所述的虚拟现实设备的手势识别控制方法，其特征在于，手部骨架模型的建立包括选取手部关键点，所述关键点包括包括掌心、手掌及指关节、以及手指端点。3.如权利要求2所述的虚拟现实设备的手势识别控制方法，其特征在于，对手部骨架模型的优...

【专利技术属性】
技术研发人员：吴斌，徐子怡，周希元，孟寅桢，
申请(专利权)人：南京江南博睿高新技术研究院有限公司，
类型：发明
国别省市：江苏,32