一种基于深度学习的视觉安全校园管理监视方法技术

本发明专利技术公开了一种基于深度学习的视觉安全校园管理监视方法，包括下述步骤：步骤一，建立危险器具目标检测图像库；建立危险器具目标检测图像库，将其分为源图像库和目标图像库；将所收集的包含危险器具的图像文件归类到源图像库和目标图像库中，且源图像库和目标图像库内的图像文件不重复；源图像库中的所有图像文件缩放到300x300像素，图像文件的内容为包含大部分场景下不同形态的危险器具；本发明专利技术的检测算法模块具有独立性，检测算法所得模型存储之后可直接被服务器获取供检测使用，无须每个流程都要经过检测算法模块，而且该模块可以和监控系统相结合，从监控系统获取视频帧进行检测，提高安全性，保证了校园处于安全的状态。

【技术实现步骤摘要】
一种基于深度学习的视觉安全校园管理监视方法
本专利技术涉及视觉监视
，具体涉及一种基于深度学习的视觉安全校园管理监视方法。
技术介绍
监控系统是由摄像、传输、控制、显示和记录登记组成。摄像机通过同轴视频电缆将视频图像传输到控制主机，控制主机再将视频信号分配到各监视器及录像设备，同时可将需要传输的语音信号同步录入到录像机内。通过控制主机，操作人员可发出指令，对云台的上、下、左、右的动作进行控制及对镜头进行调焦变倍的操作，并可通过控制主机实现在多路摄像机及云台之间的切换。利用特殊的录像处理模式，可对图像进行录入、回放、处理等操作，使录像效果达到最佳。但是，目前校园暴力事件屡禁不止，传统的校园监控系统在很大程度上只能记录存储视频资料，只能在事件发生后提供证据资料，或者在工作人员监视下能提前预防，而这需要人员的时刻关注。
技术实现思路
本专利技术的目的在于克服现有技术的缺点与不足，提供一种基于深度学习的视觉安全校园管理监视方法，该方法应用于校园安全管理的监视系统场景，对校园不同区域进行实时监控检测，并且能够灵活对接数据交互模块和通讯模块。本专利技术的目的通过下述技术方案实现：一种基于深度学习的视觉安全校园管理监视方法，包括下述步骤：步骤一，建立危险器具目标检测图像库；建立危险器具目标检测图像库，将其分为源图像库和目标图像库；将所收集的包含危险器具的图像文件归类到源图像库和目标图像库中，且源图像库和目标图像库内的图像文件不重复；源图像库中的所有图像文件缩放到300x300像素，图像文件的内容为包含大部分场景下不同形态的危险器具；目标图像库中图像文件的内容为包含校园背景下的完整形态危险器具，为了更加突出危险器具的特征，危险器具经图像裁剪处理后使其处于图像中心，若裁剪处理后的图像像素的高度或者宽度超过1000像素，则将其缩放到300x300像素；步骤二，建立与危险器具目标检测图像库对应的图像标签库；危险器具目标检测图像库中的每个图像文件都建立相应的符合标准PASCALVOC格式的xml标签文件，而这些标签文件共同构成图像标签库；标签文件中的信息包括图片ID号，图片的像素高度、宽度与深度，图片的路径，图片所包含的目标种类，危险器具目标所在区域的矩形边界框的坐标(xmin,ymin,xmax,ymax)，其中(xmin,ymin)为边界框的左上顶点坐标，(xmax,ymax)为边界框的右下顶点坐标；若一个图像文件中包含多个危险器具，则标签文件中相应储存多个边界框；步骤三，建立深度学习模型；采用端到端的深度学习目标检测网络SSD模型，该深度学习目标检测网络SSD模型具体由基础特征提取网络和辅助网络组成，其中基础特征提取网络选用VGG-16卷积神经网络结构，辅助网络使用3x3卷积核，且辅助网络的输入为基础特征提取网络的不同卷积层的特征图输出；步骤四，ImageData图像库生成；将所有参与深度学习模型训练的图像与其对应的标签文件合成一个用于训练的、可以进行高效读取的文件，而这些文件共同构成ImageData图像库；步骤五，建立目标模型；利用步骤三中的深度学习目标检测网络SSD模型通过反向传播算法在ImageData图像库中进行训练，从而得到目标模型；步骤六，目标模型测试；将待检测的图片或者视频输入到固化后的目标模型中，用矩形边界框在待检测的图像或者视频中标注出检测到的危险器具目标框，以及该目标框中包含危险器具的置信度得分；步骤七，通过监控系统获得视频帧并将其传送至后台服务器；步骤八，视频帧经过后台服务器中的目标模型检测，若得到目标检测信息，则后台服务器通过GSM模块将信息传送至相关人员，以便于其做出相关的预防措施。本专利技术与现有技术相比具有以下的有益效果：本专利技术的检测算法模块具有独立性，检测算法所得模型存储之后可直接被服务器获取供检测使用，无须每个流程都要经过检测算法模块，而且该模块可以和监控系统相结合，从监控系统获取视频帧进行检测，提高安全性，保证了校园处于安全的状态；通过检测算法程序，使得系统检测到目标时，可以通过GSM通讯模块进行实时告知，具有实时性高的效果；监控系统无处不在，应用场景十分多，通过提出本程序设计方法，可以灵活将其应用于不同的场景，具有灵活移植的效果。附图说明图1为本专利技术的整体流程图；图2为本专利技术的监视系统结构示意图。具体实施方式下面结合实施例及附图对本专利技术作进一步详细的描述，但本专利技术的实施方式不限于此。如图1所示，一种基于深度学习的视觉安全校园管理监视方法，包括下述步骤：步骤一，建立危险器具目标检测图像库；建立危险器具目标检测图像库，将其分为源图像库和目标图像库；将所收集的包含危险器具的图像文件归类到源图像库和目标图像库中，且源图像库和目标图像库内的图像文件不重复；源图像库中的所有图像文件缩放到300x300像素，图像文件的内容为包含大部分场景下不同形态的危险器具；目标图像库中图像文件的内容为包含校园背景下的完整形态危险器具，为了更加突出危险器具的特征，危险器具经图像裁剪处理后使其处于图像中心，若裁剪处理后的图像像素的高度或者宽度超过1000像素，则将其缩放到300x300像素；步骤二，建立与危险器具目标检测图像库对应的图像标签库；危险器具目标检测图像库中的每个图像文件都建立相应的符合标准PASCALVOC格式的xml标签文件，而这些标签文件共同构成图像标签库；标签文件中的信息包括图片ID号，图片的像素高度、宽度与深度，图片的路径，图片所包含的目标种类，危险器具目标所在区域的矩形边界框的坐标(xmin,ymin,xmax,ymax)，其中(xmin,ymin)为边界框的左上顶点坐标，(xmax,ymax)为边界框的右下顶点坐标；若一个图像文件中包含多个危险器具，则标签文件中相应储存多个边界框；步骤三，建立深度学习模型；采用端到端的深度学习目标检测网络SSD模型，该深度学习目标检测网络SSD模型具体由基础特征提取网络和辅助网络组成，其中基础特征提取网络选用VGG-16卷积神经网络结构，辅助网络使用3x3卷积核，且辅助网络的输入为基础特征提取网络的不同卷积层的特征图输出；而检测器是根据不同尺寸的特征图生成的默认框，检测器有两种功能：1、预测危险器具目标边界框的位置(相对于默认框坐标的4个顶点的偏移量)，训练时采用的损失函数是SmoothL1loss；2、所预测目标是危险器具种类的置信度得分，训练时采用的损失函数是Softmaxloss。步骤四，ImageData图像库生成；将所有参与深度学习模型训练的图像与其对应的标签文件合成一个用于训练的、可以进行高效读取的文件，而这些文件共同构成ImageData图像库；步骤五，建立目标模型；利用步骤三中的深度学习目标检测网络SSD模型通过反向传播算法在ImageData图像库中进行训练，从而得到目标模型；步骤六，目标模型测试；将待检测的图片或者视频输入到固化后的目标模型中，用矩形边界框在待检测的图像或者视频中标注出检测到的危险器具目标框，以及该目标框中包含危险器具的置信度得分；步骤七，通过监控系统获得视频帧并将其传送至后台服务器；步骤八，视频帧经过后台服务器中的目标模型检测，若得到目标检测信息，则后台服务器通过GSM模块将信息传送至相关人员，以便于其做出相关的预防本文档来自技高网...

【技术保护点】
1.一种基于深度学习的视觉安全校园管理监视方法，其特征在于，包括下述步骤：步骤一，建立危险器具目标检测图像库；建立危险器具目标检测图像库，将其分为源图像库和目标图像库；将所收集的包含危险器具的图像文件归类到源图像库和目标图像库中，且源图像库和目标图像库内的图像文件不重复；源图像库中的所有图像文件缩放到300x300像素，图像文件的内容为包含大部分场景下不同形态的危险器具；目标图像库中图像文件的内容为包含校园背景下的完整形态危险器具，为了更加突出危险器具的特征，危险器具经图像裁剪处理后使其处于图像中心，若裁剪处理后的图像像素的高度或者宽度超过1000像素，则将其缩放到300x300像素；步骤二，建立与危险器具目标检测图像库对应的图像标签库；危险器具目标检测图像库中的每个图像文件都建立相应的符合标准PASCAL VOC格式的xml标签文件，而这些标签文件共同构成图像标签库；标签文件中的信息包括图片ID号，图片的像素高度、宽度与深度，图片的路径，图片所包含的目标种类，危险器具目标所在区域的矩形边界框的坐标(xmin,ymin,xmax,ymax)，其中(xmin,ymin)为边界框的左上顶点坐标，(xmax,ymax)为边界框的右下顶点坐标；若一个图像文件中包含多个危险器具，则标签文件中相应储存多个边界框；步骤三，建立深度学习模型；采用端到端的深度学习目标检测网络SSD模型，该深度学习目标检测网络SSD模型具体由基础特征提取网络和辅助网络组成，其中基础特征提取网络选用VGG‑16卷积神经网络结构，辅助网络使用3x3卷积核，且辅助网络的输入为基础特征提取网络的不同卷积层的特征图输出；步骤四，ImageData图像库生成；将所有参与深度学习模型训练的图像与其对应的标签文件合成一个用于训练的、可以进行高效读取的文件，而这些文件共同构成ImageData图像库；步骤五，建立目标模型；利用步骤三中的深度学习目标检测网络SSD模型通过反向传播算法在ImageData图像库中进行训练，从而得到目标模型；步骤六，目标模型测试；将待检测的图片或者视频输入到固化后的目标模型中，用矩形边界框在待检测的图像或者视频中标注出检测到的危险器具目标框，以及该目标框中包含危险器具的置信度得分；步骤七，通过监控系统获得视频帧并将其传送至后台服务器；步骤八，视频帧经过后台服务器中的目标模型检测，若得到目标检测信息，则后台服务器通过GSM模块将信息传送至相关人员，以便于其做出相关的预防措施。...

【技术特征摘要】
1.一种基于深度学习的视觉安全校园管理监视方法，其特征在于，包括下述步骤：步骤一，建立危险器具目标检测图像库；建立危险器具目标检测图像库，将其分为源图像库和目标图像库；将所收集的包含危险器具的图像文件归类到源图像库和目标图像库中，且源图像库和目标图像库内的图像文件不重复；源图像库中的所有图像文件缩放到300x300像素，图像文件的内容为包含大部分场景下不同形态的危险器具；目标图像库中图像文件的内容为包含校园背景下的完整形态危险器具，为了更加突出危险器具的特征，危险器具经图像裁剪处理后使其处于图像中心，若裁剪处理后的图像像素的高度或者宽度超过1000像素，则将其缩放到300x300像素；步骤二，建立与危险器具目标检测图像库对应的图像标签库；危险器具目标检测图像库中的每个图像文件都建立相应的符合标准PASCALVOC格式的xml标签文件，而这些标签文件共同构成图像标签库；标签文件中的信息包括图片ID号，图片的像素高度、宽度与深度，图片的路径，图片所包含的目标种类，危险器具目标所在区域的矩形边界框的坐标(xmin,ymin,xmax,ymax)，其中(xmin,ymin)为边界框的左上顶点坐标，(xmax,ymax)为边界框的右下...

【专利技术属性】
技术研发人员：黄琼，蔡倩倩，付敏跃，孟伟，
申请(专利权)人：广东工业大学，
类型：发明
国别省市：广东,44