一种手势判断方法及存储介质技术

本发明专利技术公开了一种手势判断方法以及存储介质，所述方法包括以下步骤：接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。这样可滤掉人体骨架以外的周围环境的信息，降低了周围环境对手势识别的干扰，还可以将采集到的诸多的人体骨架信息中未在数据库内储存有的人体骨架滤除，并仅保留和跟踪数据库内储存有的人体骨架及该人体骨架的手部，本发明专利技术具有稳定性高、鲁棒性高的优点。

【技术实现步骤摘要】
一种手势判断方法及存储介质
本专利技术涉及手势识别方法领域，尤其涉及一种手势判断方法及储存介质。
技术介绍
随着计算机技术的不断发展，人机之间的交互方式日新月异，人们利用自然的方式完成与计算机间的声音、手势、肢体动作的交互，而手势识别是人机交互的一种重要方式。手势识别在非接触式操作的方法中，可以越发自然地与计算机进行交互。而且涉及领域非常之广泛，如图像处理、模式识别、计算机视觉、工业控制、智能分析、智能控制等领域。手势识别相对于其他识别有着非常直观、自然、易于学习等众多优势，结合当今流行的深度学习，可实现智能化的人机交互体验。传统的手势识别中，由于只对手势进行简单的识别，没有对周围环境进行过滤，因此周围环境一旦变得复杂，手势识别将变得不可靠，鲁棒性低。
技术实现思路
为此，需要提供一种手势判断方法及储存介质,以解决现有技术中的手势识别方法在复杂环境下鲁棒性低的问题。为实现上述目的，专利技术人提供了一种手势判断方法，包括以下步骤：接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。进一步地，在判断设备前是否存在数据库储存的人体骨架前，还包括：接收摄像设备采集的图像，并识别图像上所有的人的人脸图像；判断识别出数据库中是否存储有与采集到的人脸图像相匹配的人脸图像；若是，则根据数据库中储存的人脸图像与人体骨架信息的对应关系，确定该人脸图像对应的人体骨架信息。进一步地，判断识别出数据库中是否存储有与采集到的人脸图像相匹配的人脸图像，具体包括以下步骤：计算采集到的人脸图像与数据库储存的人脸图像的相似值；判断采集到的人脸图像与数据库储存的人脸图像的相似值是否大于50％。进一步地，根据该手部的位置变化确定对应的手势信息，具体包括以下步骤：判断该手部的位置变化是否划过启动点；若是，标记该手部的位置变化划过的关键点；判断该手部的位置变化是否划过结束点；若是，则进入下一步骤。进一步地，根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令，具体包括以下步骤：解析出划过的关键点的所呈图形信息；根据预设的所呈图形信息与操作指令的对应关系，执行该手势信息对应的操作指令。专利技术人还提供了一种存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。进一步地，在判断设备前是否存在数据库储存的人体骨架前，所述计算机程序被处理器执行时实现以下步骤；接收摄像设备采集的图像，并识别图像上所有的人的人脸图像；判断识别出数据库中是否存储有与采集到的人脸图像相匹配的人脸图像；若是，则根据数据库中储存的人脸图像与人体骨架信息的对应关系，确定该人脸图像对应的人体骨架信息。进一步地，判断识别出数据库中是否存储有与采集到的人脸图像相匹配的人脸图像，所述计算机程序被处理器执行时实现以下步骤：计算采集到的人脸图像与数据库储存的人脸图像的相似值；判断采集到的人脸图像与数据库储存的人脸图像的相似值是否大于50％。进一步地，根据该手部的位置变化确定对应的手势信息，所述计算机程序被处理器执行时实现以下步骤：判断该手部的位置变化是否划过启动点；若是，标记该手部的位置变化划过的关键点；判断该手部的位置变化是否划过结束点；若是，则进入下一步骤。进一步地，根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令，所述计算机程序被处理器执行时实现以下步骤：解析出划过的关键点的所呈图形信息；根据预设的所呈图形信息与操作指令的对应关系，执行该手势信息对应的操作指令。区别于现有技术，上述技术方案所述手势判断方法以及执行该方法所成的计算机程序的存储介质，所述方法包括以下步骤：接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。这样的方法以及执行方法的存储介质，在手势识别前，先进行人体骨架的识别，可以过滤掉人体骨架以外的周围环境的信息，大大降低了周围环境对手势识别的干扰；将采集到的人体骨架信息与数据库内人体骨架信息的配对，还可以将采集到的诸多的人体骨架信息中未在数据库内储存有的人体骨架滤除，并保留数据库内储存有的人体骨架，本方法则可以只识别数据库内储存有的人体骨架，准确地正确地跟踪具有操作权限的人体骨架的手部，最后通过该人体骨架的手部的位置变化确定对应的手势信息，将身份识别或权限识别与手势识别结合提高了该方法和存储介质的稳定性及鲁棒性。附图说明图1为本专利技术一实施例涉及的手势判断方法的流程图；图2为本专利技术一实施例涉及的haar特征结构图；图3为本专利技术一实施例涉及的YM强分类器的级联过程图；图4为本专利技术一实施例涉及的AdaBoost级联过程图；图5为本专利技术一实施例涉及的神经元结构图；图6为本专利技术一实施例涉及的具有隐含层的神经网络结构图；图7为本专利技术一实施例涉及的全连接神经网络图；图8为本专利技术一实施例涉及的局部连接神经网络图；图9为本专利技术一实施例涉及的单卷积核图；图10为本专利技术一实施例涉及的多卷积核图；图11为本专利技术一实施例涉及的卷积神经网络池化过程图；图12为本专利技术一实施例涉及的手势识别图；图13为本专利技术一实施例涉及的手势匹配结果图。具体实施方式为详细说明技术方案的
技术实现思路
、构造特征、所实现目的及效果，以下结合具体实施例并配合附图详予说明。请参阅图1至图13，本专利技术提供了一种手势判断方法及存储介质。请参阅图1，在具体的实施例中，所述方法包括以下步骤：进入步骤S104接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；然后进入步骤S105判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则然后进入步骤S106跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；最后进入步骤S107根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。在上述的方法中，所述摄像设备可以为RGB-D摄像机体感设备，该设备包含了红外深度摄像头、一个RGB摄像头、一组麦克风阵列，具备实时影像传输、语音传送，多人互动等众多功能。这款设备通过人体就可以达到体感识别与设备控制的效果，摆脱了以往的手柄控制与鼠标操纵，使操作者无需接触PC等设备就可达到“隔空控制”的效果。RGB-D摄像机通过中间的彩色镜头获取现实中的彩色数据，通过一对红外线镜头组，发射红外信号，由于红外线会对触碰到的物体产生反射，由红外接收镜头进行接收，通过内部对红外信号进行计算，转变成深度数据。摄本文档来自技高网...

【技术保护点】
1.一种手势判断方法，其特征在于，包括以下步骤：接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。

【技术特征摘要】
1.一种手势判断方法，其特征在于，包括以下步骤：接收摄像设备采集的图像，并识别图像上所有的人体骨架；所述人体骨架包括手部；判断识别出的人体骨架信息是否与数据库中存储的人体骨架信息相匹配；若是，则跟踪相匹配的人体骨架的手部，并根据该手部的位置变化确定对应的手势信息；根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令。2.根据权利要求1所述的手势判断方法，其特征在于，在判断设备前是否存在数据库储存的人体骨架前，还包括：接收摄像设备采集的图像，并识别图像上所有的人的人脸图像；判断识别出数据库中是否存储有与采集到的人脸图像相匹配的人脸图像；若是，则根据数据库中储存的人脸图像与人体骨架信息的对应关系，确定该人脸图像对应的人体骨架信息。3.根据权利要求2所述的手势判断方法，其特征在于，判断识别出数据库中是否存储有与采集到的人脸图像相匹配的人脸图像，具体包括以下步骤：计算采集到的人脸图像与数据库储存的人脸图像的相似值；判断采集到的人脸图像与数据库储存的人脸图像的相似值是否大于50％。4.根据权利要求1所述的手势判断方法，其特征在于，根据该手部的位置变化确定对应的手势信息，具体包括以下步骤：判断该手部的位置变化是否划过启动点；若是，标记该手部的位置变化划过的关键点；判断该手部的位置变化是否划过结束点；若是，则进入下一步骤。5.根据权利要求4所述的手势判断方法，其特征在于，根据预设的手势信息和操作指令的对应关系，执行该手势信息对应的操作指令，具体包括以下步骤：解析出划过的关键点的所呈图形信息；根据预设的所呈图形信息与操作指令的对应关系，执行该手势信息对应的操作指令。6.一种存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算...

【专利技术属性】
技术研发人员：林昌，吕天德，林力婷，陈庆堂，林金兰，
申请(专利权)人：莆田学院，
类型：发明
国别省市：福建,35