一种手势识别方法及VR系统技术方案

本发明专利技术公开了一种手势识别方法及VR系统，方法包括：利用置信度算法对卷积网络模型关于手骨铰接特征及手骨姿态特征的预测结果进行修正；利用虚拟相机获取手势图像，并将手势图像输入到卷积网络模型；根据手势图像获取第一实时空间特征，第一实时空间特征包括第三手骨铰接特征及第三手骨姿态特征；利用卷积网络模型中的时间模块将第一实时空间空间特征转换为时间序列特征；将时间序列特征进行融合，获取第二实时空间特征，利用卷积网络模型对第二实时空间特征进行识别，获取识别结果。利用置信度算法对卷积网络模型中间预测结果进行修正，提高了识别精度，设置虚拟相机，对获取的手势图像进行转换，使得手势图像的分布一致，保证了预测精度。证了预测精度。证了预测精度。

【技术实现步骤摘要】
一种手势识别方法及VR系统


[0001]本专利技术涉及虚拟交互
，特别涉及一种手势识别方法及VR系统。

技术介绍

[0002]虚拟现实技术具有沉浸感、交互性和想象性特点，沉浸感是虚拟现实重要的技术特征，是指用户借助交互设备和自身感知觉系统，置身于虚拟环境时的真实程度感，最理想的是人们在模拟世界中，能够感受到虚拟世界里的环境和事物是真实存在的。交互性是指用户进入虚拟环境后，通过多种传感器与多维化信息的环境发生交互作用，体验者可以利用传感设备通过自己的动作控制改变感受的内容，虚拟环境中做出的相应响应，亦与真实的一样。虚拟现实是用计算机生成的一种特殊交互环境，不仅可以再现真实存在的环境，也可以生成想象中实际不存在的甚至根本不可能实现的环境。
[0003]虚拟现实的交互技术一般包括：基于触控的交互、基于手势或姿势的交互、基于控制器的交互、手持投影仪交互、实物交互和多模态交互。基于手势或姿势的虚拟交互技术与日常生活贴近，具有交互自然的特点，符合人们的交互行为习惯。
[0004]但由于手势本身的多义性、人手形态变化的高维度以及手指之间本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种手势识别方法，其特征在于，包括步骤：训练阶段；识别阶段；所述步骤：训练阶段，包括步骤：构建卷积网络模型；利用置信度算法对所述卷积网络模型关于手骨铰接特征及手骨姿态特征的预测结果进行修正并将修正后的手骨铰接特征及手骨姿态特征输入到所述卷积网络模型，进行训练；所述步骤：识别阶段，包括步骤：利用N个虚拟相机获取分布统一的手势图像，并将所述手势图像输入到卷积网络模型；根据所述手势图像获取第一实时空间特征，所述第一实时空间特征包括第三手骨铰接特征及第三手骨姿态特征；利用所述卷积网络模型中的时间模块将所述第一实时空间特征转换为时间序列特征；将所述时间序列特征进行融合，获取第二实时空间特征，利用所述卷积网络模型对所述第二实时空间特征进行识别，获取识别结果。2.根据权利要求1所述的手势识别方法，其特征在于，所述步骤：利用置信度算法对所述卷积网络模型关于手骨铰接特征及手骨姿态特征的预测结果进行修正并将修正后的手骨铰接特征及手骨姿态特征输入到所述卷积网络模型，进行训练，包括步骤：从数据库获取手势样本数据，所述手势样本数据包括手势样本、手骨铰接特征样本及手骨姿态特征样本；利用手骨铰接特征样本及手骨姿态特征样本、采用置信度预测算法对所述卷积网络模型关于手势的第一手骨铰接特征及第一手骨姿态特征预测结果的置信度进行预测；根据置信度预测结果，对所述第一手骨铰接特征及第一手骨姿态特征的预测结果进行修正，获取第二手骨铰接特征及第二手骨姿态特征；将所述第二手骨铰接特征及第二手骨姿态特征输入所述卷积网络模型...

【专利技术属性】
技术研发人员：阮仕叠，
申请(专利权)人：深圳未来立体教育科技有限公司，
类型：发明
国别省市：