一种手部检测方法及装置制造方法及图纸

本发明专利技术实施例提供了一种手部检测方法及装置，该手部检测方法包括：获取待分析的人体图像；对所述人体图像进行人体姿势估计处理，确定所述人体图像中的人体关键点，所述人体关键点至少包括手腕关键点；对所述人体图像进行语义分割处理，从所述人体图像中分割出人体区域；根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域。本发明专利技术实施例中，通过对人体图像进行人体姿势估计和语义分割处理，分别得到人体图像中的手腕关键点和人体区域，由于确定了手腕关键点，手部区域位于手腕关键点附近，结合手腕关键点以及语义分割出的人体区域，可以快速准确地确定手部区域，且与现有方法相比，应用场景更广，提高了手部检测方法的鲁棒性。

A hand detection method and device

【技术实现步骤摘要】
一种手部检测方法及装置
本专利技术涉及图像处理
，具体而言，本专利技术涉及一种手部检测方法及装置。
技术介绍
在某些监控场景下，需要获取监控图像中的人的手部图像，以根据手部图像预测是否存在不安全行为，例如，通过手部图像，判断在公共场所是否手持刀/枪等危险物品，或者，在电网工作环境下是否佩戴安全手套，或者，在加油站是否抽烟，或者，在驾驶过程中是否打电话等。手部检测是后续预测是否存在不安全行为的关键。现有技术中，一种手部检测方法是采用肤色进行手部检测，然而，当手部佩戴了手套的场景时，难以检测到手部。另一种手部检测方法是检测五指的边缘，然而，当手部轮廓不明显例如手部握拳时，难以检测到五指的边缘。还有一种手部检测方法是采用光流法，根据动作信息检测手部，但是这种检测方法只适用于手部运动的简单场景。也就是说，上述现有的手部检测方法适用范围均较小，鲁棒性差，因而，如何提高手部检测方法的鲁棒性是亟待解决的问题。
技术实现思路
本专利技术实施例要解决的技术问题是提供一种手部检测方法及装置，用于解决现有的手部检测方法鲁棒性弱的问题。为解决上述技术问题，本专利技术实施例提供的一种手部检测方法，包括：获取待分析的人体图像；对所述人体图像进行人体姿势估计处理，确定所述人体图像中的人体关键点，所述人体关键点至少包括手腕关键点；对所述人体图像进行语义分割处理，从所述人体图像中分割出人体区域；根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域。可选的，所述人体关键点还包括手肘关键点；所述根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域包括：连接所述手腕关键点和手肘关键点，得到连线；确定与所述连线垂直且经过所述手腕关键点的区域分割线；利用所述区域分割线将所述人体区域分割成手部区域和人体其他区域。可选的，所述利用所述区域分割线将所述人体区域分割成手部区域和人体其他区域包括：将位于所述区域分割线的远离与所述手肘关键点一侧的人体区域作为手部区域。可选的，所述根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域之后，还包括：根据所述手部区域，确定手部是否持有指定物品。可选的，所述根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域之后，还包括：根据所述手部区域，确定手部是否佩戴手套。本专利技术还提供一种手部检测装置，包括：图像获取模块，用于获取待分析的人体图像；人体姿势估计模块，用于对所述人体图像进行人体姿势估计处理，确定所述人体图像中的人体关键点，所述人体关键点至少包括手腕关键点；语义分割模块，用于对所述人体图像进行语义分割处理，从所述人体图像中分割出人体区域；手部区域确定模块，用于根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域。可选的，所述人体关键点还包括手肘关键点；所述手部区域确定模块，用于连接所述手腕关键点和手肘关键点，得到连线；确定与所述连线垂直且经过所述手腕关键点的区域分割线；利用所述区域分割线将所述人体区域分割成手部区域和人体其他区域。可选的，所述手部区域确定模块，用于将位于所述区域分割线的远离与所述手肘关键点一侧的人体区域作为手部区域。可选的，所述装置还包括：第一确定模块，用于根据所述手部区域，确定手部是否持有指定物品。可选的，所述装置还包括：第二确定模块，用于根据所述手部区域，确定手部是否佩戴手套。与现有技术相比，本专利技术实施例提供的手部检测方法及装置通过对人体图像进行人体姿势估计和语义分割处理，分别得到人体图像中的手腕关键点和人体区域，由于确定了手腕关键点，手部区域位于手腕关键点附近，结合手腕关键点以及语义分割出的人体区域，可以快速准确地确定手部区域。与现有的肤色检测方法相比，即使手部佩戴了手套，也可以准确识别出手部区域，与现有的检测五指边缘的方法相比，即使手部轮廓不明显，例如手部握拳时，也可以准确识别出手部区域，与现有的光流法相比，即使手部不运动，也能够准确识别出手部区域，可见，与现有方法相比，应用场景更广，提高了手部检测方法的鲁棒性。附图说明为了更清楚地说明本专利技术实施例的技术方案，下面将对本专利技术实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术一实施例的手部检测方法的流程示意图；图2为本专利技术另一实施例的手部检测方法的流程示意图；图3为采用图2所示的手部检测方法对人体图像进行处理的流程示意图；图4为本专利技术一实施例的手部检测装置的结构示意图；图5为本专利技术另一实施例的手部检测装置的结构示意图。具体实施方式为使本专利技术要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。在下面的描述中，提供诸如具体的配置和组件的特定细节仅仅是为了帮助全面理解本专利技术的实施例。因此，本领域技术人员应该清楚，可以对这里描述的实施例进行各种改变和修改而不脱离本专利技术的范围和精神。另外，为了清楚和简洁，省略了对已知功能和构造的描述。应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本专利技术的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。在本专利技术的各种实施例中，应理解，下述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本专利技术实施例的实施过程构成任何限定。请参考图1，图1为本专利技术一实施例的手部检测方法的流程示意图，该手部检测方法包括：步骤11：获取待分析的人体图像。本专利技术实施例中的人体图像可来自于监控摄像头、电脑或数码照相机等设备。待分析的人体图像可以是深度图像，也可以是二维的RGB图像。步骤12：对所述人体图像进行人体姿势估计处理，确定所述人体图像中的人体关键点，所述人体关键点至少包括手腕关键点。人体姿势估计是借助计算机视觉和图像处理的技术，获取图像中人体各关键点的位置，实现对人体姿势的描述和理解。人体姿势估计的关键在于人体关键点的确定，人体关键点通常包括：鼻尖、眼镜、耳廓中间、嘴角、肩部关节的中间、手肘、手腕、手尖(手末端整体的中间位置)、大腿根部、膝盖、脚踝、脚尖、锁骨交点、上身中间位置、盆骨、脖子和头顶等。本专利技术实施例中，至少确定人体图像中的手腕。本专利技术实施例中，可以采用多种类型的算法模型对人体图像进行人体姿势估计处理，例如FasterR-CNN、MaskR-CCN或poseNet模型等。下面对上述几种算法进行简单说本文档来自技高网...

【技术保护点】
1.一种手部检测方法，其特征在于，包括：/n获取待分析的人体图像；/n对所述人体图像进行人体姿势估计处理，确定所述人体图像中的人体关键点，所述人体关键点至少包括手腕关键点；/n对所述人体图像进行语义分割处理，从所述人体图像中分割出人体区域；/n根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域。/n

【技术特征摘要】
1.一种手部检测方法，其特征在于，包括：
获取待分析的人体图像；
对所述人体图像进行人体姿势估计处理，确定所述人体图像中的人体关键点，所述人体关键点至少包括手腕关键点；
对所述人体图像进行语义分割处理，从所述人体图像中分割出人体区域；
根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域。


2.如权利要求1所述的方法，其特征在于，所述人体关键点还包括手肘关键点；所述根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域包括：
连接所述手腕关键点和手肘关键点，得到连线；
确定与所述连线垂直且经过所述手腕关键点的区域分割线；
利用所述区域分割线将所述人体区域分割成手部区域和人体其他区域。


3.如权利要求2所述的方法，其特征在于，所述利用所述区域分割线将所述人体区域分割成手部区域和人体其他区域包括：
将位于所述区域分割线的远离与所述手肘关键点一侧的人体区域作为手部区域。


4.如权利要求1所述的方法，其特征在于，所述根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域之后，还包括：
根据所述手部区域，确定手部是否持有指定物品。


5.如权利要求1所述的方法，其特征在于，所述根据所述手腕关键点和所述人体区域，确定所述人体图像中的手部区域之后，还...

【专利技术属性】
技术研发人员：戴依若，沙浩，
申请(专利权)人：株式会社日立制作所，
类型：发明
国别省市：日本;JP