发放传单行为的检测方法及检测系统技术方案

本发明专利技术发放传单行为的检测方法，包括下列步骤：将人体划分18个关键点即鼻子、脖子、右肩、右肘、右手腕、左肩、左肘、左手腕、右臀、右膝盖、右脚踝、左臀、左膝盖、左脚踝、右眼、左眼、右耳朵、左耳朵；设置17个肢体骨架，所述17个肢体骨架为所述18个关键点间存在的肢体意义的连线；摄像头或相机正对目标人物时，建立该目标人物是否在发放传单的行为指标。本发明专利技术还公开了其检测系统。本发明专利技术帮助城市、街道、市容市貌管理人员快速有效的发现发放传单的行为，节省人力并提升事件发现、处理的效率，对智慧城市的发展有重要价值。

Detection method and system of leaflet issuing behavior

The detection method for distributing leaflet behavior of the invention includes the following steps: dividing the human body into 18 key points: nose, neck, right shoulder, right elbow, right wrist, left shoulder, left elbow, left wrist, right hip, right knee, right ankle, left hip, left knee, left ankle, right eye, left eye, right ear and left ear; setting 17 limb skeletons, wherein the 17 limb skeletons are 18 The connection of body meaning between key points; when the camera or camera is facing the target person, establish whether the target person is issuing flyers or not. The invention also discloses a detection system thereof. The invention helps city, street and city appearance managers to quickly and effectively discover the behavior of distributing flyers, saves manpower and improves the efficiency of event discovery and processing, which is of great value to the development of smart city.

【技术实现步骤摘要】
发放传单行为的检测方法及检测系统
本专利技术涉及行人监控的
，具体涉及到一种发放传单行为的检测方法及发放传单行为的检测系统的技术。
技术介绍
日常生活中，经常看到有人发传单。发放传单，不仅浪费资源，而且影响行人出行，污染环境卫生，损害城市形象。传统的发放传单主要通过执法人员巡查发现，不仅耗时耗力，巡查效果也不佳。因而本专利结合街道、马路的摄像头，使用姿态估计算法，提供一种发放传单的检测方法。
技术实现思路
为了克服现有技术的不足，本专利技术的目的在于提供一种发放传单行为的检测方法及检测系统，帮助城市、街道、市容市貌管理人员快速有效的发现发放传单的行为，节省人力并提升事件发现、处理的效率。为达上述目的，本专利技术采用以下技术方案：一方面，提供一种发放传单行为的检测方法，所述发放传单的检测方法包括下列步骤：将人体划分18个关键点即鼻子、脖子、右肩、右肘、右手腕、左肩、左肘、左手腕、右臀、右膝盖、右脚踝、左臀、左膝盖、左脚踝、右眼、左眼、右耳朵、左耳朵；设置17个肢体骨架，所述17个肢体骨架为所述18个关键点间存在的肢体意义的连线，包括鼻子与脖子的连线、脖子与右肩的连线、右肩与右肘的连线、右肘与右手腕的连线、脖子与左肩的连线、左肩与左肘的连线、左肘与左手腕的连线、脖子与右臀的连线、右臀与右膝盖的连线、右膝盖与右脚踝的连线、脖子与左臀的连线、左臀与左膝盖的连线、左膝盖与左脚踝的连线、鼻子与右眼的连线、鼻子与左眼的连线、右眼与右耳朵的连线、左眼与左耳朵的连线；设置人体中轴线，首先取右臀和左臀连接线段的中点，通过该中点与脖子所形成的直线；右肩与右肘的连线为右手大臂，右肘与右手腕的连线为右手小臂；左肩与左肘的连线为左手大臂、左肘与左手腕的连线为左手小臂；右肘为右肘部关键点，右手腕为右腕部关键点；左肘为左肘部关键点，左手腕为左肘部关键点；摄像头或相机正对目标人物时，该目标人物做出下列行为指标时认定目标人物在做发放传单行为：所述右手大臂或左手大臂与身体中轴线的夹角超过规定幅度；右手发放动作时，右肘部关键点和右腕部关键点分别与人体中轴线的距离超过右肩与左肩之间的距离，同时为与打电话行为相区分，右手腕的高度低于右肘的高度，在摄像头视频数据里连续至少2帧图片中，存在右肘、右手腕与人体中轴线的距离变大，并且最终停滞规定的时间；左手发放动作时，左肘部关键点和左腕部关键点分别与人体中轴线的距离超过右肩与左肩之间的距离，同时为与打电话行为相区分，左手腕的高度低于左肘的高度，在摄像头视频数据里连续至少2帧图片中，存在左肘、左手腕与人体中轴线的距离变大，并且最终停滞规定的时间。本专利技术发放传单行为的检测方法，建立下列单元：建立数据库：根据业务场景采集图片和视频的数据，在该数据的基础上构建肢体识别及姿态估计模型，建立是否发放传单的所述行为指标，所述模型中设置有肢体关键点检测器；视频数据接入：将街道、马路的摄像头视频数据进行接入；行人肢体行为分析：肢体识别及姿态估计模型对接入的视频数据中的行人进行肢体动作的识别即肢体识别服务，其中所述肢体关键点检测器识别并标记出肢体部位，进而对不同角度下的姿势进行估计，根据所述模型的检测结果结合所述行为指标对属于发放传单的行为触发报警，提醒工作人员。所述肢体识别及姿态估计模型采用OpenPose或AlphaPose、LightweightOpenPose姿态估计算法，检测图像中每个人的各个所述关键点，并根据所述行为指标，来判断目标人物是否在做发放传单的行为。另一方面，提供一种基于前述发放传单行为的检测系统，包括：摄像头及数据接入单元，用于拍摄街道、马路的行人，并将摄像头视频数据进行接入；数据库：根据业务场景采集图片和视频的数据，在该数据的基础上构建肢体识别及姿态估计模型，建立是否发放传单的行为指标；肢体识别服务单元，肢体识别及姿态估计模型对接入的视频数据中的行人进行肢体动作的识别即肢体识别服务，其中所述肢体关键点检测器识别并标记出肢体部位进而对不同角度下的姿势进行估计，根据所述模型的检测结果结合所述行为指标对属于发放传单的行为进行确认；报警服务单元，对属于发放传单的行为触发报警，提醒工作人员。本专利技术具有以下有益效果：本专利技术由于将人体划分18个关键点，设置17个肢体骨架，建立在摄像头或相机正对目标人物时，是否发放传单的行为指标，引入肢体识别及姿态估计模型，故可以帮助城市、街道、市容市貌管理人员快速有效的发现发放传单的行为，节省人力并提升事件发现、处理的效率，对智慧城市的发展有重要价值。附图说明为了更清楚地说明本专利技术实施例的技术方案，下面将对本专利技术实施例中所需要使用的附图作简单地介绍。显而易见地，下面所描述的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。图1是本专利技术发放传单行为的检测方法原理框架图；图2是本专利技术目标人物示意图。具体实施方式下面结合附图并通过具体实施方式来进一步说明本专利技术的技术方案。其中，附图仅用于示例性说明，表示的仅是示意图，而非实物图，不能理解为对本专利的限制；为了更好地说明本专利技术的实施例，附图某些部件会有省略、放大或缩小，并不代表实际产品的尺寸；对本领域技术人员来说，附图中某些公知结构及其说明可能省略是可以理解的。本专利技术实施例的附图中相同或相似的标号对应相同或相似的部件；在本专利技术的描述中，需要理解的是，若出现术语“上”、“下”、“左”、“右”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利技术和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此附图中描述位置关系的用语仅用于示例性说明，不能理解为对本专利的限制，对于本领域的普通技术人员而言，可以根据具体情况理解上述术语的具体含义。本专利技术发放传单行为的检测方法，包括下列步骤：如图2，将人体划分18个关键点即鼻子0、脖子1、右肩2、右肘3、右手腕4、左肩5、左肘6、左手腕7、右臀8、右膝盖9、右脚踝10、左臀11、左膝盖12、左脚踝13、右眼14、左眼15、右耳朵16、左耳朵17；设置17个肢体骨架，所述17个肢体骨架为所述18个关键点间存在的肢体意义的连线，包括鼻子0与脖子1的连线、脖子1与右肩2的连线、右肩2与右肘3的连线、右肘3与右手腕4的连线、脖子1与左肩5的连线、左肩5与左肘6的连线、左肘6与左手腕7的连线、脖子1与右臀8的连线、右臀8与右膝盖9的连线、右膝盖9与右脚踝10的连线、脖子1与左臀11的连线、左臀11与左膝盖12的连线、左膝盖12与左脚踝13的连线、鼻子0与右眼14的连线、鼻子0与左眼15的连线、右眼14与右耳朵16的连线、左眼15与左耳朵17的连线；设置人体中轴线，首先取右臀8和左臀11连接线段的中点，通过该中点与脖子1所形成的直线本文档来自技高网...

【技术保护点】
1.一种发放传单行为的检测方法，其特征在于：所述发放传单的检测方法包括下列步骤：/n将人体划分18个关键点即鼻子(0)、脖子(1)、右肩(2)、右肘(3)、右手腕(4)、左肩(5)、左肘(6)、左手腕(7)、右臀(8)、右膝盖(9)、右脚踝(10)、左臀(11)、左膝盖(12)、左脚踝(13)、右眼(14)、左眼(15)、右耳朵(16)、左耳朵(17)；/n设置17个肢体骨架，所述17个肢体骨架为所述18个关键点间存在的肢体意义的连线，包括鼻子(0)与脖子(1)的连线、脖子(1)与右肩(2)的连线、右肩(2)与右肘(3)的连线、右肘(3)与右手腕(4)的连线、脖子(1)与左肩(5)的连线、左肩(5)与左肘(6)的连线、左肘(6)与左手腕(7)的连线、脖子(1)与右臀(8)的连线、右臀(8)与右膝盖(9)的连线、右膝盖(9)与右脚踝(10)的连线、脖子(1)与左臀(11)的连线、左臀(11)与左膝盖(12)的连线、左膝盖(12)与左脚踝(13)的连线、鼻子(0)与右眼(14)的连线、鼻子(0)与左眼(15)的连线、右眼(14)与右耳朵(16)的连线、左眼(15)与左耳朵(17)的连线；/n设置人体中轴线，首先取右臀(8)和左臀(11)连接线段的中点，通过该中点与脖子(1)所形成的直线；右肩(2)与右肘(3)的连线为右手大臂，右肘(3)与右手腕(4)的连线为右手小臂；左肩(5)与左肘(6)的连线为左手大臂、左肘(6)与左手腕(7)的连线为左手小臂；右肘(3)为右肘部关键点，右手腕(4)为右腕部关键点；左肘(6)为左肘部关键点，左手腕(7)为左肘部关键点；/n摄像头或相机正对目标人物时，该目标人物做出下列行为指标时认定目标人物在做发放传单行为：/n所述右手大臂或左手大臂与身体中轴线的夹角超过规定幅度；/n右手发放动作时，右肘部关键点和右腕部关键点分别与人体中轴线的距离超过右肩(2)与左肩(5)之间的距离，同时为与打电话行为相区分，右手腕(4)的高度低于右肘(3)的高度，在摄像头视频数据里连续至少2帧图片中，存在右肘(3)、右手腕(4)与人体中轴线的距离变大，并且最终停滞规定的时间；/n左手发放动作时，左肘部关键点和左腕部关键点分别与人体中轴线的距离超过右肩(2)与左肩(5)之间的距离，同时为与打电话行为相区分，左手腕(7)的高度低于左肘(6)的高度，在摄像头视频数据里连续至少2帧图片中，存在左肘(6)、左手腕(7)与人体中轴线的距离变大，并且最终停滞规定的时间。/n...

【技术特征摘要】
1.一种发放传单行为的检测方法，其特征在于：所述发放传单的检测方法包括下列步骤：
将人体划分18个关键点即鼻子(0)、脖子(1)、右肩(2)、右肘(3)、右手腕(4)、左肩(5)、左肘(6)、左手腕(7)、右臀(8)、右膝盖(9)、右脚踝(10)、左臀(11)、左膝盖(12)、左脚踝(13)、右眼(14)、左眼(15)、右耳朵(16)、左耳朵(17)；
设置17个肢体骨架，所述17个肢体骨架为所述18个关键点间存在的肢体意义的连线，包括鼻子(0)与脖子(1)的连线、脖子(1)与右肩(2)的连线、右肩(2)与右肘(3)的连线、右肘(3)与右手腕(4)的连线、脖子(1)与左肩(5)的连线、左肩(5)与左肘(6)的连线、左肘(6)与左手腕(7)的连线、脖子(1)与右臀(8)的连线、右臀(8)与右膝盖(9)的连线、右膝盖(9)与右脚踝(10)的连线、脖子(1)与左臀(11)的连线、左臀(11)与左膝盖(12)的连线、左膝盖(12)与左脚踝(13)的连线、鼻子(0)与右眼(14)的连线、鼻子(0)与左眼(15)的连线、右眼(14)与右耳朵(16)的连线、左眼(15)与左耳朵(17)的连线；
设置人体中轴线，首先取右臀(8)和左臀(11)连接线段的中点，通过该中点与脖子(1)所形成的直线；右肩(2)与右肘(3)的连线为右手大臂，右肘(3)与右手腕(4)的连线为右手小臂；左肩(5)与左肘(6)的连线为左手大臂、左肘(6)与左手腕(7)的连线为左手小臂；右肘(3)为右肘部关键点，右手腕(4)为右腕部关键点；左肘(6)为左肘部关键点，左手腕(7)为左肘部关键点；
摄像头或相机正对目标人物时，该目标人物做出下列行为指标时认定目标人物在做发放传单行为：
所述右手大臂或左手大臂与身体中轴线的夹角超过规定幅度；
右手发放动作时，右肘部关键点和右腕部关键点分别与人体中轴线的距离超过右肩(2)与左肩(5)之间的距离，同时为与打电话行为相区分，右手腕(4)的高度低于右肘(3)的高度，在摄像头视频数据里连续至少2帧图片中，存在右肘(3)、右手腕(4)与人体中轴线的距离变大，并且最...

【专利技术属性】
技术研发人员：张发恩，张虎，林国森，
申请(专利权)人：创新奇智青岛科技有限公司，
类型：发明
国别省市：山东;37