一种视频监控实时监测违章作业的方法技术

本发明专利技术公开了一种视频监控实时监测违章作业的方法，通过收集施工人员现场施工图片作为样本并对样本进行标记、处理、归类，然后建立违章行为检测识别模型，并将违章行为检测识别模型应用在施工现场摄像头并进行监测，最后对违章作业行为进行记录并通知安监管理人员，实现对违规作业行为进行自动记录，节省人力物力。

A method of real-time monitoring of illegal operations by video surveillance

The invention discloses a method for video monitoring real-time monitoring of illegal operations, through the collection of construction workers on-site construction pictures as samples and markers, to sample processing, classification, and then establish the violation behavior detection model, and the model of illegal behavior detection should be used in the construction site camera and monitor, record and finally notice safety management personnel to conduct illegal operations, realize the automatic recording of illegal operations, save manpower and material resources.

【技术实现步骤摘要】
一种视频监控实时监测违章作业的方法
本专利技术涉及计算机图形识别
，更具体地，涉及一种视频监控实时监测违章作业的方法。
技术介绍
安全监护及现场督察工作是电网安全作业的重要组成部分，是确保工作人员的人身安全和设备的正常运行的基础工作。目前，电网作业的前提是，工作负责人和工作班成员须经过供电公司组织的安全规程考试，并取得合格成绩，且人员资质在审核期内。所有人员在电力设备的作业的时候，必须严格执行“十个规定动作”，凭票工作、凭票操作、戴安全帽、穿工作服、系安全带、停电、验电、接地、挂牌装遮拦、现场交底。作业前，设备运行人员提前做好安全措施，包括停电、验电、接地、挂牌装遮拦等，而工作负责人则携带工作票进行开工许可，凭票在现场进行工作，在高压场地严格执行戴安全帽、穿工作服制度，对超过1.5米的高空作业须系安全带。作业风险等级包括可接受风险、低风险、中等风险、高风险，对于风险等级较高的工作，设备管理人须在现场进行安全督查工作，而安全监督部门（以下简称安监）则不定期对管辖区域的工作进行抽样督查。督查的内容主要包括是否戴安全帽、穿工作服、1.5米以上的高空作业是否系安全带、核查工作票或操作票的正确性、安全措施是否要求等。目前，在供电公司的电力设备同时开展工作，每天达成百上千单，现场督察工作任务十分繁重。由于工作数量基数大，安监督察人员无法对每单工作都进行督察，存在督察不到位，不全面的现象，因此，无法保证电力设备上工作的安全性。而部分没被督察到的现场工作的人员，存在工作疏忽和巧幸心里，放松十个规定动作的执行力度，存在极大的安全隐患。另外，对于现场作业的不规范行为，由于督察人员不一定长期督察在场，无法抓拍到其不规范的行为，因此惩治证据也难以获得。缺少督察人员的现场工作，在一定程度上减低了工作人员的安全重视程度，容易造成工作疏忽，导致安全事件的发生。
技术实现思路
本专利技术的目的是解决目前电网安监督查人员无法对每单工作都进行督查的缺陷，设计一种视频监控实时监测违章作业的方法。为实现以上专利技术目的，采用的技术方案是：一种视频监控实时检测违章作业的方法，包括以下步骤：S1：收集施工人员现场施工图片作为样本并对样本进行标记、处理、归类；S2：建立违章行为检测识别模型；S3：将违章行为检测识别模型应用在施工现场摄像头并进行监测；S4：对违章作业行为进行记录并通知安监管理人员。其中步骤S1中现场施工图片为网络照片，对样本进行处理包括对样本进行归一化处理并将样本长度统一，对样本进行归类包括将样本分为训练样本、测试样本和校验样本，训练样本占总样本的50%，测试样本和校验样本各占总样本的25%。优选的是，所述网络照片通过python语言爬虫抓包获得。在上述方案中，步骤S2包括以下步骤：S2.1：输入测试样本；S2.2：通过卷积神经网络CNN对测试样本进行特征提取；S2.3：利用RPN网络生成区域Proposals的数目，交叉训练RPN网络和Faster-RCNN网络；S2.4：在卷积神经网络CNN的最后一层featuremap中映射步骤S2.3的Proposals；S2.5：在最后一个conv的RoIpooling层中每个RoI生成固定尺寸的featuremap；S2.6：采用探测分类概率（SoftmaxLoss）和探测边框回归（SmoothL1Loss）对分类概率和边框回归（Boundingboxregression）联合训练；S2.7：采用反向传播（back-propagation）和随机梯度下降（stochasticgradientdescent）对网络进行训练。其中步骤S2.3包括以下步骤：S2.3.1：采用ImageNet的模型初始化RPN网络，然后对框选区域进行微调；S2.3.2：利用步骤S2.3.1得到的框选区域Proposals作为Fast-RCNN网络的输入，然后进行网络的训练；S2.3.3：利用步骤S2.3.2中训练好的Fast-RCNN初始化RPN网络，继续训练RPN网络；S2.3.4：固定convlayers，仅微调属于Fast-RCNN的全连接层FC。其中所述步骤S2所述违章行为识别包括安全帽检测、工作服检测、安全带检测。优选的是，步骤S4中通知安监管理人员为通过短信进行通知。与现有技术相比，本专利技术的有益效果是：1）采用RPN网络和Fast-RCNN网络，收敛速度快，提高了模型的训练速度的应用速度。2）使用卷积神经网络，简化了程序编写的复杂度。3）对违规作业行为自动识别记录，节省人力物力。附图说明图1为物体检测效果图；图2为RPN网络的实现流程图；图3为分类与位置调整的数据结构图。具体实施方式附图仅用于示例性说明，不能理解为对本专利的限制；以下结合附图和实施例对本专利技术做进一步的阐述。实施例1一种视频监控实时监测违章作业的方法，包括以下步骤：S1：收集施工人员现场施工图片作为样本并对样本进行标记、处理、归类；S2：建立违章行为检测识别模型；S3：将违章行为检测识别模型应用在施工现场摄像头并进行监测；S4：对违章作业行为进行记录并通知安监管理人员。其中步骤S1中现场施工图片为网络照片，对样本进行处理包括对样本进行归一化处理并将样本长度统一，对样本进行归类包括将样本分为训练样本、测试样本和校验样本，训练样本占总样本的50%，测试样本和校验样本各占总样本的25%。如图1所示，识别模型的训练样本包括安全帽、工作服或安全带的照片素材，且每张相片具有标记；在归一化处理中，短边的长度统一伸缩至600像素；相片的标记格式如下：若图片中只包含一个检测对象，则标记格式如下：0000001.jpghelmet69762152230000002.jpgcoverall8358113162若图片中包含多个检测对象，则标记格式如下：000001.jpghelmet6976215223000001.jpgcoverall8358113162000001.jpgsafetyBelt8358113162优选的是，所述网络照片通过python语言爬虫抓包获得。在上述方案中，步骤S2包括以下步骤：S2.1：输入测试样本；S2.2：通过卷积神经网络CNN对测试样本进行特征提取；S2.3：利用RPN网络生成区域Proposals的数目，交叉训练RPN网络和Faster-RCNN网络；S2.4：在卷积神经网络CNN的最后一层featuremap中映射步骤S2.3的Proposals；S2.5：在最有一个conv的RoIpooling层中每个RoI生成固定尺寸的featuremap；S2.6：采用探测分类概率（SoftmaxLoss）和探测边框回归（SmoothL1Loss）对分类概率和边框回归（Boundingboxregression）联合训练；S2.7：采用反向传播（back-propagation）和随机梯度下降（stochasticgradientdescent）对网络进行训练。通过搭建基于RPN网络和Faster-RCNN网络的违章检测识别模型，其特征在融合RPN和Fast-RCNN网络，固定了生成区域Proposals的数目，在RPN网络和Fast-RCNN网络之间交替微调参数，实现卷积特征参数共享，提高训练和应用算法的速度。其中利用R本文档来自技高网...

【技术保护点】
一种视频监控实时监测违章作业的方法，其特征在于，包括以下步骤：S1：收集施工人员现场施工图片作为样本并对样本进行标记、处理、归类；S2：建立违章行为检测识别模型；S3：将违章行为检测识别模型应用在施工现场摄像头并进行监测；S4：对违章作业行为进行记录并通知安监管理人员。

【技术特征摘要】
1.一种视频监控实时监测违章作业的方法，其特征在于，包括以下步骤：S1：收集施工人员现场施工图片作为样本并对样本进行标记、处理、归类；S2：建立违章行为检测识别模型；S3：将违章行为检测识别模型应用在施工现场摄像头并进行监测；S4：对违章作业行为进行记录并通知安监管理人员。2.根据权利要求1所述的一种视频监控实时监测违章作业的方法，其特征在于，步骤S1中现场施工图片为网络照片，对样本进行处理包括对样本进行归一化处理并将样本长度统一，对样本进行归类包括将样本分为训练样本、测试样本和校验样本，其中训练样本占总样本的50%，测试样本和校验样本各占总样本的25%。3.根据权利要求2所述的一种视频监控实时监测违章作业的方法，其特征在于，所述网络照片通过python语言爬虫抓包获得。4.根据权利要求1所述的一种视频监控实时监测违章作业的方法，其特征在于，步骤S2包括以下步骤：S2.1：输入测试样本；S2.2：通过卷积神经网络CNN对测试样本进行特征提取；S2.3：利用RPN网络生成区域Proposals的数目，交叉训练RPN网络和Faster-RCNN网络；S2.4：在卷积神经网络CNN的最后一层featuremap中映...

【专利技术属性】
技术研发人员：林跃欢，冯康恒，程天宇，秦立斌，卜启铭，潘维，万方涛，龙湘雯，李家淇，廖一键，曾振华，黎浩钧，陈健强，黄盛超，
申请(专利权)人：广东电网有限责任公司东莞供电局，
类型：发明
国别省市：广东,44