【技术实现步骤摘要】
一种手势识别方法
本专利技术涉及人机虚拟交互
,特别是一种手势识别方法。
技术介绍
早期的手势识别通过数据手套等手部穿戴设备采集手的关键点空间位置信息,检测效果良好,准确度和稳定性高。但掩盖了手势自然表达的方式,对用户来说是额外的负担,价格昂贵。随着图像目标检测方法的不断深入研究,基于传统的图像处理与机器学习的方案训练的分类器,直接输入彩色摄像头数据进行识别,操作简单,价格便宜,但其存在检测识别精度低,可靠性低等问题。鉴于机器学习方法在复杂环境下不够鲁棒,手势识别的研究也渐渐转移到深度学习的目标检测方法与关键点检测姿态估计方法,其精度高,可靠性高,但面临计算量太大,在边缘端(移动端)运行速度慢,延时长,卡顿情况严重。
技术实现思路
本专利技术旨在给出一种能够降低边缘端的计算量的基于深度可分离卷积的边缘计算手势识别方法,以提高边缘端的运行速度,降低延时,避免卡顿。本专利技术所述的一种手势识别方法,其特征在于:包括如下步骤:步骤1、特征提取步骤:通过深度可分离卷积神经网络作为特征提取网络,对手势图片进行CNN特征提取,所述深度可分离卷积由深度卷积(Depthwise)和卷积核为1的点卷积(Pointwise)组成;步骤2、特征处理步骤:CNN特征提取后,分别提取三种不同尺度的深度可分离卷积网络的输出特征图(FeatureMap),分别作为后续各特征处理网络目标检测层的输入的一部分;分别得到三个层的输出;并将三个层的输出作为整个网络的输出;步 ...
【技术保护点】
1.一种手势识别方法,其特征在于:包括如下步骤:/n特征提取步骤:通过深度可分离卷积神经网络作为特征提取网络,对手势图片进行CNN特征提取,所述深度可分离卷积由深度卷积(Depthwise)和卷积核为1的点卷积(Pointwise)组成;/n特征处理步骤:CNN特征提取后,分别提取三种不同尺度的深度可分离卷积网络的输出特征图,分别作为后续三个特征处理网络目标检测层的输入的一部分;分别得到三个层的输出;并将三个层的输出作为整个网络的输出;/n手势检测与识别步骤:依据上述输出中进行解析得到存在手势的概率,以及已知有手势的情况下,对应手势属于每个类别的条件概率;再结合通过聚类方法得到的先验框的宽、高,将网络输出的手势候选边界框经非极大值抑制处理,得到精确的手势边界框,实现手势的定位,完成手势识别。/n
【技术特征摘要】
1.一种手势识别方法,其特征在于:包括如下步骤:
特征提取步骤:通过深度可分离卷积神经网络作为特征提取网络,对手势图片进行CNN特征提取,所述深度可分离卷积由深度卷积(Depthwise)和卷积核为1的点卷积(Pointwise)组成;
特征处理步骤:CNN特征提取后,分别提取三种不同尺度的深度可分离卷积网络的输出特征图,分别作为后续三个特征处理网络目标检测层的输入的一部分;分别得到三个层的输出;并将三个层的输出作为整个网络的输出;
手势检测与识别步骤:依据上述输出中进行解析得到存在手势的概率,以及已知有手势的情况下,对应手势属于每个类别的条件概率;再结合通过聚类方法得到的先验框的宽、高,将网络输出的手势候选边界框经非极大值抑制处理,得到精确的手势边界框,实现手势的定位,完成手势识别。
2.根据权利要求1所述的手势识别方法,其特征在于:步骤3中,预测得到存在手势概率的方法为:对卷积层输出的张量进行解析,得到手势的回归边界框和分类置信度,根据分类置信度得到手势的概率。
3.根据权利要求1所述...
【专利技术属性】
技术研发人员:龙辉,
申请(专利权)人:广州高维网络科技有限公司,
类型:发明
国别省市:广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。