一种用于警务督察吸烟行为识别方法技术

本发明专利技术公开了一种用于警务督察吸烟行为识别方法，通过吸烟行为检测，对视频解码的序列图片进行分析，检测分析结果，对审讯人员可能存在的吸烟行为进行报警处理，再通过人工审核，确定吸烟违规行为。本发明专利技术创造通过深度学习中的成熟的目标检测算法实现吸烟动作的精确定位，能从整体到局部逐级细分，实现了精细化处理；同时与工程上结合使得非常适用于公安督察系统，从而减少误报发生。

A method of smoking behavior identification for Police Inspectors

【技术实现步骤摘要】
一种用于警务督察吸烟行为识别方法
本专利技术涉及计算机视觉和图像处理领域，尤其涉及一种用于警务督察吸烟行为识别方法。
技术介绍
现如今，为落实中央提升民警执法能力规范文明执法，加强对审讯室执法过程的监督，贯彻科技强警的理念，应用现代化先进技术，对审讯室执法过程进行监督，将大量繁琐的视频审查工作交由机器执行，可以有效的提升督察监督效率，为文明执法保驾护航。在督察期间，发现公安工作人员在审讯过程中吸烟的情况屡见不鲜，有损文明执法形象，也降低了办案效率，可见“吸烟”的危害之大。所以，设计一个能够实时监控审讯员是否存在吸烟行为的方法，就能大大降低审讯员吸烟的情况。针对上述情况结合目前现有的技术方案，存在以下问题：（1）没有能够准确地检测到吸烟动作的方法，并把方法运用到公安督察系统；（2）无法准确区分办案人员和嫌疑人；（3）误报率高，没有合理有效的方法对系统反馈的结果进行评判。
技术实现思路
本专利技术的目的在于，针对上述问题，提出一种用于警务督察吸烟行为识别方法。本专利技术的专利技术目的是通过以下技术方案实现的：一种用于警务督察吸烟行为识别方法，包括以下步骤：S1：采集视频数据，采集审查室中不同时间，不同位置的视频数据；S2：解码视频成序列图片，将采集的视频数据解码成序列图片进行吸烟行为检测；S3：检测吸烟行为，通过检测计算区域结果分析是否存在吸烟行为；S4：图像报警提醒，当存在吸烟行为，进行报警处理；S5：人工复核，通过人工审核确认吸烟行为状态；其中，所述步骤S3包括以下子步骤：S301：检测人物审讯员矩形区域；S302：检测吸烟区域；S303：检测亮度；S304：输入结果至时间滤波器。所述的步骤S301，包括以下子步骤：S3031：提取不同地点、不同角度、不同时段的图像数据；S3032：挑选出所有穿制服的审讯员图像数据；S3033：根据上述数据制作标签数据；S3034：通过CenterNet目标检测算法训练数据得到审讯员检测模型；S3035：在图像中运用训练好的CenterNet目标检测算法预测得到审讯员的矩形区域BBboxA（x,y,w,h），其中x、y为矩形中心点坐标，w、h为该矩形区域的宽和高，并在矩形框上方叠加字符“审讯员”。所述的步骤S302，在审讯员的矩形区域BBboxA（x,y,w,h）中检测。包括以下子步骤：S3021：提取不同地点、不同角度、不同时段的图像数据；S3022：挑选出所有穿制服的审讯员图像数据；S3023：根据图像数据制作标签数据；S3024：通过CenterNet目标检测算法训练数据得到吸烟检测模型；其中，吸烟检测模型为检测手、嘴巴和香烟出现在同一个平面得到的数据模型；S3025：在图像中运用训练好的CenterNet目标检测算法预测得到吸烟区域的矩形区域BBboxB（x,y,w,h），其中x、y表示矩形中心点坐标，w、h表示该矩形区域的宽和高，并在矩形框上方叠加字符“疑似吸烟”。所述的步骤303，在吸烟区域的矩形区域BBboxB（x,y,w,h）中检测，包括以下子步骤：S3031：在吸烟区域矩形框BBboxB（x,y,w,h）中，采用hough变换检测到圆或者矩形；S3032：统计BBboxB（x,y,w,h）中圆形或者矩形中的平均亮度值，得到L1；S3033：统计BBboxB（x,y,w,h）中除圆形或者矩形区域外的平均亮度值，得到L2；S3034：计算L1和L2的绝对差值：t=L1-L2；S3035：当t>20时，则认为存在烟头，进一步确认为吸烟行为。所述的步骤S304，其方法如下：设置视频流中5帧为判定一个结果，假设在连续5帧图像中，判定得到“吸烟”的单帧图像标记值为1，其余为0，计算5帧图像标记值总和t；当t≥3时，则判定为“存在吸烟行为”；当t≤2时，则判定为“不存在吸烟行为”。本专利技术的有益效果：（1）通过吸烟行为识别方法，能够有效地规范办案人员的行为；（2）通过对“吸烟”状态识别进行大量优化和改进，能够准确区分“审讯员”和“嫌疑人”，使用亮度检测方法，提高识别“吸烟”状态的准确性；（3）通过使用时间滤波器，人工审核的方法，有效地降低了误报几率。附图说明图1是本专利技术的结构流程框图；图2是本专利技术步骤S3的结构流程框图。具体实施方式为了对本专利技术的技术特征、目的和效果有更加清楚的理解，先对照附图说明本专利技术的具体实施方式。本实施例中，如图1，一种用于警务督察吸烟行为识别方法，包括以下步骤：步骤1，实时采集审讯室视频数据；步骤2，将视频解码成序列图片；步骤3，在序列图片中运用审讯员检测模块检测审讯员，得到审讯员的矩形区域，该矩形区域表示为BBboxA（x,y,w,h），其中x、y为矩形中心点坐标，w、h为该矩形区域的宽和高，并在矩形框上方叠加字符“审讯员”。对于审讯员的检测主要技术要点为：（1）、提前获取约30万张不同审讯室、不同角度、不同时段的图像数据；（2）、挑选出所有穿制服的审讯员图像数据；（3）、将上述数据制作标签数据；（4）、选用CenterNet目标检测算法训练数据得到审讯员检测模型；（5）、在图像中运用训练好的CenterNet目标检测算法预测得到审讯员的矩形区域BBboxA（x,y,w,h）；步骤4，运用吸烟检测模块在审讯员区域BBboxA（x,y,w,h）中检测，得到吸烟区域矩形框BBboxB（x,y,w,h），并在矩形框上方叠加字符“疑似吸烟”。其中x、y、w、h释义同步骤3，对于检测得到吸烟区域BBboxB（x,y,w,h）的主要技术要点同上述步骤3中的方法，不同点在于训练数据标注方式不同，吸烟区域训练数据标注方法为：当手夹着烟头在嘴巴“吮吸”时，也即是手、嘴巴、烟头出现在同一个平面时则标注为“吸烟”，检测吸烟动作也是按照此标准进行；步骤5，运用亮度检测模块在吸烟的矩形区域BBboxB（x,y,w,h）中检测是否存在亮度集中且亮度较高的点状区域或者条形区域，检测方式方法按如下进行：（1）、在吸烟区域矩形框BBboxB（x,y,w,h）中，采用hough变换检测到圆或者矩形；（2）、统计BBboxB（x,y,w,h）中圆形或者矩形中的平均亮度值，得到L1；（3）、统计BBboxB（x,y,w,h）中除圆形或者矩形区域外的平均亮度值，得到L2；（4）、计算L1和L2的绝对差值：t=L1-L2；e、当t>20时，则认为存在烟头，进而确认为吸烟行为；步骤6，将步骤5中判断为“吸烟”的结果输入到时间滤波器中，其技术要点主要为：视频流中按5帧判定一个结果，假设在连续5帧图像中，判定得到“吸烟”的单帧图像标记值为1，其余为0，计算5帧图像标记值总和t，当t大于等于3时，则判定为“吸烟”，本文档来自技高网...

【技术保护点】
1.一种用于警务督察吸烟行为识别方法，其特征在于，包括以下步骤：/nS1：采集视频数据，采集审讯室中不同时间，不同角度的视频数据；/nS2：解码视频成序列图片，将采集的视频数据解码成序列图片进行吸烟行为检测；/nS3：检测吸烟行为，通过检测计算区域结果分析是否存在吸烟行为；/nS4：图像报警提醒，当存在吸烟行为，进行报警处理；/nS5：人工复核，通过人工审核确认吸烟行为状态；/n其中，所述步骤S3包括以下子步骤：/nS301：检测审讯员矩形区域；/nS302：检测吸烟区域；/nS303：检测亮度；/nS304：输入结果至时间滤波器。/n

【技术特征摘要】
1.一种用于警务督察吸烟行为识别方法，其特征在于，包括以下步骤：
S1：采集视频数据，采集审讯室中不同时间，不同角度的视频数据；
S2：解码视频成序列图片，将采集的视频数据解码成序列图片进行吸烟行为检测；
S3：检测吸烟行为，通过检测计算区域结果分析是否存在吸烟行为；
S4：图像报警提醒，当存在吸烟行为，进行报警处理；
S5：人工复核，通过人工审核确认吸烟行为状态；
其中，所述步骤S3包括以下子步骤：
S301：检测审讯员矩形区域；
S302：检测吸烟区域；
S303：检测亮度；
S304：输入结果至时间滤波器。


2.根据权利要求1所述的一种用于警务督察吸烟行为识别方法，其特征在于，所述的步骤S301，包括以下子步骤：
S3011：提取不同地点、不同角度、不同时段的图像数据；
S3012：挑选出所有穿制服的审讯员图像数据；
S3013：根据上述数据制作标签数据；
S3014：通过CenterNet目标检测算法训练数据得到审讯员检测模型；
S3015：在图像中运用训练好的CenterNet目标检测算法预测得到审讯员的矩形区域BBboxA（x,y,w,h），其中x、y为矩形中心点坐标，w、h为该矩形区域的宽和高，并在矩形框上方叠加字符“审讯员”。


3.根据权利要求1所述的一种用于警务督察吸烟行为识别方法，其特征在于，所述的步骤S302，包括以下子步骤：
S3021：提取不同地点、不同角度、不同时段的图像数据；
S3022：挑选出所有穿制服的审讯员图像数据；
S3023：根据图像数据制作标签数据；
S3024：通过CenterNet目标检测算法训练数据得到吸烟检测模型；
S3025：在图像中运用训练好的Center...

【专利技术属性】
技术研发人员：刘军，冯江远，吴介桅，曹治江，朱军伟，蒲俗，
申请(专利权)人：成都国翼电子技术有限公司，
类型：发明
国别省市：四川;51