一种人机姿态交互方法技术

本发明专利技术提供一种本发明专利技术实施例中的一种人机姿态交互方法

【技术实现步骤摘要】
一种人机姿态交互方法、系统、电子设备及存储介质


[0001]本申请涉及车辆智能交互
，具体涉及一种人机姿态交互方法
、
系统
、
电子设备及存储介质
。

技术介绍

[0002]随着智能化设备的普及，人们对设备的交互体验的要求越来越高，车机作为智能化生活的载体体现之一，对于车机的智能化交互需求日益增强，对于车机的交互控制，可以具体划分为车内交互控制与车外交互控制，其中，车外交互控制主要基于图像获取装置进行图像获取并识别，并根据识别结果进行车机控制
。
[0003]但是现有的车外车机交互的方法中，在面对复杂识别环境下的智能化交互时，例如在广场
、
道路
、
展会等人流量较多的交互环境中，由于图像中存在大量识别目标，会产生对获取到的图像进行识别时识别交互对象错误
、
动作识别错误等情况，造成人机交互识别准确率低下甚至识别错误的问题
。

技术实现思路

[0004]鉴于以上所述现有技术的缺点，本专利技术提供一种人机姿态交互本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种人机姿态交互方法，其特征在于，所述人机姿态交互方法包括：获取待处理帧图像，所述待处理帧图像中存在至少一个待识别对象，所述待处理帧图像通过设置于车机的图像获取装置进行获取；根据第一预设算法对所述待处理帧图像进行关键点提取，得到多个待处理关键点，并根据第二预设算法对所述待处理帧图像进行实例分割，得到多个待处理掩膜；基于各所述待处理关键点和各所述待处理掩膜，确定目标识别对象，并对目标识别对象的姿势进行识别，确定所述待处理帧图像中目标识别对象的姿势类别；若所述姿势类别为交互开始姿势，则控制开启交互模式，并识别当前帧图像中目标识别对象的姿势，所述当前帧图像为所述待处理帧图像之后的帧图像；若识别到所述当前帧图像中目标识别对象的姿势为交互指令姿势，则根据所述交互指令姿势确定与所述交互指令姿势具有映射关系的预设控制指令，并在车机执行所述预设控制指令
。2.
根据权利要求1所述的人机姿态交互方法，其特征在于，控制开启交互模式并识别当前帧图像中目标识别对象的姿势之前，所述人机姿态交互方法还包括：获取所述待处理帧图像后预设数目的开始验证帧图像，并对各所述开始验证帧图像中目标识别对象的姿势进行识别，所述预设数目的开始验证帧图像为所述待处理帧图像后的预设数目个连续帧图像；若各所述开始验证帧图像中目标识别对象的姿势均为交互开始姿势，则控制开启交互模式，并以第一预设提示音进行语音播报
。3.
根据权利要求1所述的人机姿态交互方法，其特征在于，基于各所述待处理关键点和各所述待处理掩膜，确定目标识别对象包括：对各所述待处理关键点所属掩膜区域和各所述待处理掩膜进行匹配，得到多个初始匹配组合，并对各所述初始匹配组合进行重叠度运算，得到多个待处理匹配组合；若各所述待处理匹配组合中待处理掩膜存在多个对象的待处理关键点，则对各待处理关键点进行可见性置信度运算，并选取可见性置信度最大的点作为待处理掩膜的待处理关键点，得到各待处理掩膜对应的关键点集；比较各待处理掩膜中关键点集数量，并将关键点集中待处理关键点数量最多的待处理掩膜确定为目标掩膜；对所述目标掩膜内的待处理关键点进行三维坐标转换，得到所述目标掩膜内各待处理关键点的三维坐标，并基于所述目标掩膜内各待处理关键点的三维坐标确定目标识别对象
。4.
根据权利要求3所述的人机姿态交互方法，其特征在于，对所述目标掩膜内的待处理关键点进行三维坐标转换包括：获取待处理帧图像的图像尺寸信息；根据所述图像尺寸信息对所述目标掩膜内中待处理关键点进行像素坐标比例换算，以确定所述目标掩膜中各所述待处理关键点的待换算二维坐标参数；基于预设坐标转换算法对各所述待换算二维坐标参数进行计算，得到所述目标掩膜内各待处理关键点的三维坐标
。5.
根据权利要求3所述的人机姿态交互方法，其特征在于，基于所述目标掩膜内各待处
理关键点的三维坐标确定目标识别对象之后，所述人机姿态交互方法还包括：基于所述目标掩膜内各待处理关键点的三维坐标与预设姿势种类的各关键点三维坐标，确定所述目标掩膜内各待处理关键点的最大角度偏差值；若各所述待处理关键点的最大角度偏差值小于或等于预设识别偏差值，则将所述预设姿势种类作为所述目标识别对象的姿势识别结果
。6.
根据权利要求1所述的人机姿态交互方法，其特征在于，识别到所述当前帧图像中目标识别对象的姿势为交互指令姿势之后，所述人机姿态交互方法还包括：获取所述当前帧图像后预设数目的识别验证帧图像，并对各所述识别验证帧图像中目标识别对象的姿势进行识别，所述预设数目的识别验证帧图像为所述当前帧图像后的预设数目个连续帧图像；若各所述识别验证帧图像中目标识别对象的姿势均为交互指令姿势，则根据所述交互指令姿势确定与所述交互指令姿势具有映射关系的预设控制指令，并在车机执行所述预设控制指令，并基于所述预设控制指令进行语音播报
。7.
根据...

【专利技术属性】
技术研发人员：田尊明，杨稷，程世维，陈程，
申请(专利权)人：重庆长安汽车股份有限公司，
类型：发明
国别省市：