洗手动作识别方法及系统技术方案

本发明专利技术提供洗手动作识别方法及系统。该方法包括：在预检测阶段，获取当前帧的图像数据；所述图像数据包括配准后的彩色图像和深度图像；对所述图像数据进行预检测；若通过预检测，使用所述深度图像，对所述彩色图像进行背景去除处理，得到前景图像；使用所述前景图像进行洗手动作识别，得到图像数据对应的识别结果；所述识别结果包括识别出的洗手动作类别。可见，在本发明专利技术实施例中，洗手动作识别的实施划分为两步，第一步先进行预检测，预检测通过才会执行第二步：动作识别。并且，在执行第二步的过程中，会利用配准的深度图像辅助进行背景去除，过滤很多背景信息，增大了识别鲁棒性，然后，再对前景图像进行识别，得到识别结果。

【技术实现步骤摘要】
洗手动作识别方法及系统
本专利技术涉及计算机领域，特别涉及一种洗手动作识别方法及系统。
技术介绍
很多行业对洗手流程有要求。以往都是通过人为自觉和培训洗手流程，但是缺乏有利监督，难免出现纰漏。因此可以借助计算机视觉结合机器学习的方法进行自动化监督操作，节省人力和成本，同时保障洗手步骤的正确性和规范性。进行自动化监督的前提是识别出洗手动作。因此，如何进行洗手动作识别是目前研究的热门。
技术实现思路
有鉴于此，本专利技术实施例提供一种洗手动作识别方法及系统，以实现洗手动作识别。为实现上述目的，本专利技术实施例提供如下技术方案：一种洗手动作识别方法，包括：在预检测阶段，获取当前帧的图像数据；所述图像数据包括配准后的彩色图像和深度图像；对所述图像数据进行预检测；若通过预检测，使用所述深度图像，对所述彩色图像进行背景去除处理，得到前景图像；使用所述前景图像进行洗手动作识别，得到图像数据对应的识别结果；所述识别结果包括识别出的洗手动作类别。可选的，所述进行预检测包括：使用所本文档来自技高网...

【技术保护点】
1.一种洗手动作识别方法，其特征在于，包括：/n在预检测阶段，获取当前帧的图像数据；所述图像数据包括配准后的彩色图像和深度图像；/n对所述图像数据进行预检测；/n若通过预检测，使用所述深度图像，对所述彩色图像进行背景去除处理，得到前景图像；/n使用所述前景图像进行洗手动作识别，得到图像数据对应的识别结果；所述识别结果包括识别出的洗手动作类别。/n

【技术特征摘要】
1.一种洗手动作识别方法，其特征在于，包括：
在预检测阶段，获取当前帧的图像数据；所述图像数据包括配准后的彩色图像和深度图像；
对所述图像数据进行预检测；
若通过预检测，使用所述深度图像，对所述彩色图像进行背景去除处理，得到前景图像；
使用所述前景图像进行洗手动作识别，得到图像数据对应的识别结果；所述识别结果包括识别出的洗手动作类别。


2.如权利要求1所述的方法，其特征在于，所述进行预检测包括：
使用所述图像数据进行冲水检测；
使用所述图像数据进行泡沫检测；
若未处于冲水状态并且不存在泡沫，确定通过预检测。


3.如权利要求2所述的方法，其特征在于，在所述预检测阶段之前，还包括样本准备阶段；
所述样本准备阶段包括：
获取图像样本；所述图像样本包括配准的彩色图像样本、深度图像样本，以及标签；所述标签为第一标签、第二标签或第三标签；其中，所述第一标签包括：表征处于冲水状态的信息；所述第二标签包括：表征存在泡沫的信息；所述第三标签包括洗手动作类别；
对配准的彩色图像样本和深度图像样本进行数据增强，以扩充图像样本的数量；
对数据增强后得到的每一图像样本进行规范化处理。


4.如权利要求3所述的方法，其特征在于，
标签为所述第一标签、且经规范化处理的图像样本为第一目标图像样本；
标签为所述第二标签、且经规范化处理的图像样本为第二目标图像样本；
标签为所述第三标签、且经规范化处理的图像样本中的彩色图像样本为目标彩色图像样本，深度图像样本为目标深度图像样本；
所述样本准备阶段还包括：
使用所述目标深度图像，对相应的目标彩色图像进行背景去除处理，得到的前景图像与所述目标深度图像和所述第三标签构成第三目标图像样本。


5.如权利要求4所述的方法，其特征在于，在所述样本准备阶段之后，所述预...

【专利技术属性】
技术研发人员：李江，李骊，
申请(专利权)人：北京华捷艾米科技有限公司，
类型：发明
国别省市：北京;11