一种手势识别方法及系统技术方案

本发明专利技术公开了一种手势识别方法和系统，所述手势识别方法包括：实时获取环境点云数据，根据环境点云数据构建虚拟二维平面；采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面；采集手势在屏幕互动平面的运动点云数据，根据所述运动点云数据进行手势识别；根据识别的手势生成对应的控制指令，并将所述控制指令通过无线传输发送给终端设备。本发明专利技术可根据显示设备屏幕创建一个等比例的屏幕互动屏幕，使手势精确的匹配到显示设备屏幕，实现多设备便携式无接触互动。设备便携式无接触互动。设备便携式无接触互动。

【技术实现步骤摘要】
一种手势识别方法及系统


[0001]本专利技术涉及信息处理
，尤其涉及一种手势识别方法及系统。

技术介绍

[0002]随着多媒体技术的发展，应用于其中的交互技术也在快速的发展，对交互技术的可靠性，易用性，无感性和使用体验也提出了更高的要求。人机交互技术也不再局限于简单的键盘鼠标等按键操作，更多的交互技术如手势交互，表情交互，姿态交互被提出和应用。
[0003]隔空手势是一类非接触的，能够使用户以徒手方式进行操作的空中手势，其本质是一种不给用户手势交互带来任何不变的自然人机交互方式。隔空手势通过用户自然地利用手指，手腕和手臂动作表达交互意图，主要包括指，挥手，握拳，手掌转动等，具有更好地交互空间，更高地灵活度等特点。
[0004]随着智能手机和计算手镯、戒指和手表的小屏幕计算设备持续增多，用户现有的这种屏幕大都通过遥控器或者微信小程序与屏幕互动、操作不方面。再者，这些显示设备需要多种操作手势，会有某些手势会与之前定义的手势冲突的问题。

技术实现思路

[0005]针对上述技术问题，本专利技术实施例提供了一种可对特定手势进行识别进而控制终端设备的手势识别方法及系统。
[0006]本专利技术实施例的第一方面提供一种手势识别方法，所述方法包括：实时获取环境点云数据，根据环境点云数据构建虚拟二维平面；采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面；采集手势在屏幕互动平面的运动点云数据，根据所述运动点云数据进行手势识别；根据识别的手势生成对应的控制指令，并将所述控制指令通过无线传输发送给终端设备。
[0007]可选地，所述预设点标记法包括五点标记法，五点包括显示设备的四个顶点和中心点，所述采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面的步骤包括：根据所述五个标记点的位置信息构建与显示设备屏幕对应的屏幕互动平面。
[0008]可选地，所述预设点标记法包括两点标记法，所述采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面的步骤包括：将显示设备屏幕的参数信息发送给激光雷达，根据所述参数信息确定两个标记点，根据所述两个标记点的位置信息构建与显示设备屏幕对应的屏幕互动平面。
[0009]可选地，所述根据识别的手势生成对应的控制指令的步骤包括：根据识别的手势查找预设的映射关系，获取所述手势对应的控制指令，所述预设的映射关系中包括手势与控制指令之间的对应关系。
[0010]可选地，所述方法还包括：保存屏幕互动平面的参数信息并设置预设的唤醒手势；通过激光雷达监测唤醒手势，获取预设的唤醒手势的位置信息；根据所述位置信息和参数信息构建第二屏幕互动平面。
[0011]可选地，所述方法还包括：若预设时间内未识别到手势，则通过激光雷达监测唤醒手势，获取预设的唤醒手势的位置信息。
[0012]可选地，所述根据所述运动点云数据进行手势识别的步骤包括：根据所述运动点云数据获取手势在屏幕互动平面上的坐标位置，根据所述坐标位置进行手势识别。
[0013]可选地，所述根据所述运动点云数据进行手势识别的步骤包括：建立深度神经网络，将采集的手势的运动点云数据输入到深度神经网络中进行训练，根据深度神经网络提取的特征进行手势识别。
[0014]可选地，所述方法还包括：当监测到唤醒手势后，判断显示设备是否开启，若未开启，则向显示设备发送开启指令。
[0015]本专利技术实施例第二方面提供了一种手势识别系统，所述系统包括可自由移动的激光雷达，与激光雷达通信的终端设备，所述激光雷达用于发送雷达信号，并接收反射信号，根据所述反射信号获取环境点云数据，并执行上述任一项所述的手势识别方法。
[0016]本专利技术提供的技术方案中，根据预设点标记法构建与显示设备屏幕对应的屏幕互动平面，使手势精确的匹配到显示设备屏幕，实现便携式显示设备的无接触互动。同时，采用对不同的显示设备设置不同的唤醒手势，可精确的实现多个显示设备的无接触式互动，使得操作更加人性化。
附图说明
[0017]图1为本专利技术手势识别方法的其中一实施例的流程示意图；
[0018]图2为本专利技术建立屏幕互动平面的示意图；
[0019]图3为本专利技术手势识别方法的另一实施例的流程示意图。
具体实施方式
[0020]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0021]请参阅图1所示，本专利技术提供一种手势识别方法，所述方法包括如下步骤：
[0022]步骤S10，实时获取环境点云数据，根据环境点云数据构建虚拟二维平面。
[0023]本专利技术通过激光雷达实时获取环境点云数据，环境点云数据将会以激光雷达为圆心绘制出一个二维平面，该二维平面为一看不见的虚拟的平面。优选的，二维平面为一个扇形平面。
[0024]步骤S20，采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面。
[0025]本专利技术的其中一实施例中，预设点标记法包括五点标记法，五点包括显示设备的四个顶点和中心点，使用时，可通过点击使用端已经加载好的应用程序，在显示设备上显示五个标记点。请参考图2所示，位于桌子上的激光雷达向外发射激光，用户可在激光雷达所构建的虚拟二维平面上按照真实显示设备屏幕所依次显示的数字提示依次点击五个标记点，例如显示设备平面的四个顶点1，2，4，5和中心点3，根据这五个标记点的位置信息构建与显示设备屏幕对应的屏幕互动平面。由于显示设备的固定是随意的，所以当通过虚拟二
维平面对标记点进行点击时，即可圈定显示设备屏幕在虚拟平面上的等比例位置，由此可实现多设备，便携式互动。
[0026]在本专利技术的另一实施例中，预设点标记法包括两点标记法，所述采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面的步骤包括：将显示设备屏幕的参数信息发送给激光雷达，根据所述参数信息确定两个标记点，根据所述两个标记点的位置信息构建与显示设备屏幕对应的屏幕互动平面。
[0027]具体的，显示设备可将其屏幕的形状，形状比例等参数信息发送给激光雷达，激光雷达根据接收的参数信息确定两个标记点，用户通过两个标记点确定屏幕互动平面的长或宽或对角线，激光雷达获取屏幕互动平面的两点长，宽和对角线，并与显示设备屏幕的形状，形状比例等参数进行比较，计算显示设备屏幕与屏幕互动平面的比例参数。因此，本实施例可仅根据两点的位置信息创建一个与显示设备屏幕等比例的屏幕互动平面。
[0028]例如，显示设备屏幕可以为正方形，长方形或圆形，也可以为其他类型的显示设备屏幕，以圆形显示设备屏幕为例进行说明，用户仅需确认圆点以及任意边框点两点，激光雷达即可根据显示设备发送的边框大小确认虚拟圆形屏幕的大小。从而使得用户只需要标定很少的标定点即可创建一个比例精确的屏幕互动平面。
[0029]步骤S30，采集手势在屏幕本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种手势识别方法，其特征在于，所述方法包括：实时获取环境点云数据，根据环境点云数据构建虚拟二维平面；采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面；采集手势在屏幕互动平面的运动点云数据，根据所述运动点云数据进行手势识别；根据识别的手势生成对应的控制指令，并将所述控制指令通过无线传输发送给终端设备。2.根据权利要求1所述的手势识别方法，其特征在于，所述预设点标记法包括五点标记法，五点包括显示设备的四个顶点和中心点，所述采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面的步骤包括：根据所述五个标记点的位置信息构建与显示设备屏幕对应的屏幕互动平面。3.根据权利要求1所述的手势识别方法，其特征在于，所述预设点标记法包括两点标记法，所述采用预设点标记法构建与显示设备屏幕对应的屏幕互动平面的步骤包括：将显示设备屏幕的参数信息发送给激光雷达，根据所述参数信息确定两个标记点，根据所述两个标记点的位置信息构建与显示设备屏幕对应的屏幕互动平面。4.根据权利要求1所述的手势识别方法，其特征在于，所述根据识别的手势生成对应的控制指令的步骤包括：根据识别的手势查找预设的映射关系，获取所述手势对应的控制指令，所述预设的映射关系中包括手势与控制指令之间的对应关系。5.根据权利要求1所述的手势识别方法，其特征在于，所述方...

【专利技术属性】
技术研发人员：杨毅，龙杰，王品，
申请(专利权)人：惠州越登智能科技有限公司，
类型：发明
国别省市：