一种基于监控视频的器件紧固操作的检测方法技术

本发明专利技术提供了一种基于监控视频的器件紧固操作的检测方法，该基于监控视频的器件紧固操作的检测方法利用视频监控智能分析技术对器件紧固操作过程中的违规操作进行自动识别以确定相应的违规操作细节，该检测方法不仅能够实现对异常工序的24h无间断精准识别，并且还能够识别出不同类型的违规操作以进行实时告警并对告警信息进行存档，方便管理人员对流水线进行实时监管和质量追溯，从而极大提高工厂流水线的生产质量及生产效率。

A detection method of device fastening operation based on surveillance video

【技术实现步骤摘要】
一种基于监控视频的器件紧固操作的检测方法
本专利技术涉及工业制造质量控制的
，特别涉及一种基于监控视频的器件紧固操作的检测方法。
技术介绍
在生产洗衣机等产品的流水线中，通常需要采用螺丝等紧固件对工件进行紧固操作，为了保证在打螺丝时受力均匀，以防止紧固时出现缝隙，这就要求在流水线左右两侧布置两个操作人员针对同一个工件同时进行气枪打螺丝操作，若出现单人对同一个工件操作或者三人同时对同一个工件操作时均可能会造成工件紧固处因受力不均匀而产生缝隙，但是在流水线上的操作人员会出现不同的违规操作，从而导致该缝隙的产生。为了防止不同违规操作的出现，目前的解决办法就是通过日常人工巡检方式或者视频监控结合人工查看的方式，但是这两种方式不仅耗费大量的人力物力，并且还不能够实时地和准确地检测到每一个违规操作及其对应的操作区域。可见，现有的基于人工肉眼查看的流水线监督方式并不能及时地和全面地识别出所有违规操作，这种方式效率低下并且效果不明显，从而严重地影响流水线的生产质量。
技术实现思路
针对现有技术存在的缺陷，本专利技术提供一种基于监控视频的器件紧固操作的检测方法，该基于监控视频的器件紧固操作的检测方法包括如下步骤：步骤S1，获取关于操作区域的若干垂直监控视频，并根据该若干垂直监控视频对预设器件紧固操作识别算法进行训练处理；步骤S2，根据经过该训练处理的该预设器件紧固操作识别算法，对实时获得的垂直监控视频进行不同操作元素的识别处理；步骤S3，根据该识别处理的结果，对相应的操作元素进行关于违规与否的判断处理；步骤S4，根据该判断处理的结果，对当前器件紧固操作的整体工序执行情况进行分析处理；可见，该基于监控视频的器件紧固操作的检测方法利用视频监控智能分析技术对器件紧固操作过程中的违规操作进行自动识别以确定相应的违规操作细节，该检测方法不仅能够实现对异常工序的24h无间断精准识别，并且还能够识别出不同类型的违规操作以进行实时告警并对告警信息进行存档，方便管理人员对流水线进行实时监管和质量追溯，从而极大提高工厂流水线的生产质量及生产效率。本专利技术提供一种基于监控视频的器件紧固操作的检测方法，其特征在于，所述基于监控视频的器件紧固操作的检测方法包括如下步骤：步骤S1，获取关于操作区域的若干垂直监控视频，并根据所述若干垂直监控视频对预设器件紧固操作识别算法进行训练处理；步骤S2，根据经过所述训练处理的所述预设器件紧固操作识别算法，对实时获得的垂直监控视频进行不同操作元素的识别处理；步骤S3，根据所述识别处理的结果，对相应的操作元素进行关于违规与否的判断处理；步骤S4，根据所述判断处理的结果，对当前器件紧固操作的整体工序执行情况进行分析处理；进一步，在所述步骤S1中，获取关于操作区域的若干垂直监控视频，并根据所述若干垂直监控视频对预设器件紧固操作识别算法进行训练处理具体包括，步骤S101，对所述器件紧固操作对应的流水生产线进行工序分解处理，以确定所述流水生产线对应每一个紧固操作点的操作区域属性；步骤S102，根据每一个紧固操作点的操作区域属性，确定每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式；步骤S103，根据每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式，获取每一个紧固操作点对应的垂直监控视频；步骤S104，根据每一个紧固操作点对应的垂直监控视频，对所述预设器件紧固操作识别算法进行训练处理；进一步，在所述步骤S101中，对所述器件紧固操作对应的流水生产线进行工序分解处理，以确定所述流水生产线对应每一个紧固操作点的操作区域属性具体包括，获取所述流水生产线中对于加工对象不同待紧固部件对应的紧固操作工序，以确定所述不同待紧固部件对应的紧固操作点关于内部环境和/或外部环境的所述操作区域属性；或者，在所述步骤S102中，根据每一个紧固操作点的操作区域属性，确定每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式具体包括，步骤S1021，根据每一个紧固操作点的操作区域属性，确定所述每一个紧固操作点在所述生产流水线中的紧固操作空间信息、紧固操作障碍信息和紧固操作允许时间信息中的至少一者；步骤S1022，根据所述紧固操作空间信息、所述紧固操作障碍信息和所述紧固操作允许时间信息中的至少一者，确定摄像头相对于所述紧固操作点的垂直布置方式和/或所述摄像头的拍摄焦距和/或所述摄像头的抓拍频率；或者，在所述步骤S103中，根据每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式，获取每一个紧固操作点对应的垂直监控视频具体包括在确定每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式后，向所有紧固操作点对应的摄像头发送拍摄触发控制时序信号，以使每一个紧固操作点对应的摄像头按照特定的时序获取关于其对应紧固操作点的垂直监控视频；或者，在所述步骤S104中，根据每一个紧固操作点对应的垂直监控视频，对所述预设器件紧固操作识别算法进行训练处理具体包括，对每一个紧固操作点对应的垂直监控视频进行训练图像帧的解码摘选处理，并将摘选得到的若干帧垂直监控图像输入至所述预设器件紧固操作识别算法中，以实现所述训练处理；进一步，在所述步骤S2中，根据经过所述训练处理的所述预设器件紧固操作识别算法，对实时获得的垂直监控视频进行不同操作元素的识别处理具体包括，步骤S201，获取经过所述训练处理的所述预设器件紧固操作识别算法的容差度，并根据所述容差度确定对所述实时获得的垂直监控视频的解码模式；步骤S202，根据所述解码模式，对所述实时获得的垂直监控视频进行解码处理，以获得在时间上连续的若干帧解码图像；步骤S203，对所述若干帧解码图像进行静态操作元素识别处理和/或动态操作元素识别处理，以获得关于当前垂直监控视频的静态操作元素和/或动态操作元素；进一步，在所述步骤S201中，获取经过所述训练处理的所述预设器件紧固操作识别算法的容差度，并根据所述容差度确定对所述实时获得的垂直监控视频的解码模式具体包括，获取所述预设器件紧固操作识别算法对不同分辨率视频的识别容差度，并根据所述实时获得的垂直监控视频的实际分辨率，来获得具有相应解码精确度的不同解码模式；或者，在所述步骤S202中，根据所述解码模式，对所述实时获得的垂直监控视频进行解码处理，以获得在时间上连续的若干帧解码图像具体包括，根据所述解码模式，对所述实时获得的垂直监控视频进行关于时序连续性的解码处理，以获得在时间上连续的所述若干帧解码图像；或者，在所述步骤S203中，对所述若干帧解码图像进行静态操作元素识别处理和/或动态操作元素识别处理，以获得关于当前垂直监控视频的静态操作元素和/或动态操作元素具体包括，对所述若干帧解码图像中的每一帧进行关于加工对象整体或者部分或者操作人员数量的静态操作元素识别处理，和/或进行关于操作人员对所述加工对象动作的动态操作元素识别处理，以获得关于当前本文档来自技高网...

【技术保护点】
1.一种基于监控视频的器件紧固操作的检测方法，其特征在于，所述基于监控视频的器件紧固操作的检测方法包括如下步骤：/n步骤S1，获取关于操作区域的若干垂直监控视频，并根据所述若干垂直监控视频对预设器件紧固操作识别算法进行训练处理；/n步骤S2，根据经过所述训练处理的所述预设器件紧固操作识别算法，对实时获得的垂直监控视频进行不同操作元素的识别处理；/n步骤S3，根据所述识别处理的结果，对相应的操作元素进行关于违规与否的判断处理；/n步骤S4，根据所述判断处理的结果，对当前器件紧固操作的整体工序执行情况进行分析处理。/n

【技术特征摘要】
1.一种基于监控视频的器件紧固操作的检测方法，其特征在于，所述基于监控视频的器件紧固操作的检测方法包括如下步骤：
步骤S1，获取关于操作区域的若干垂直监控视频，并根据所述若干垂直监控视频对预设器件紧固操作识别算法进行训练处理；
步骤S2，根据经过所述训练处理的所述预设器件紧固操作识别算法，对实时获得的垂直监控视频进行不同操作元素的识别处理；
步骤S3，根据所述识别处理的结果，对相应的操作元素进行关于违规与否的判断处理；
步骤S4，根据所述判断处理的结果，对当前器件紧固操作的整体工序执行情况进行分析处理。


2.如权利要求1所述的基于监控视频的器件紧固操作的检测方法，其特征在于：
在所述步骤S1中，获取关于操作区域的若干垂直监控视频，并根据所述若干垂直监控视频对预设器件紧固操作识别算法进行训练处理具体包括，
步骤S101，对所述器件紧固操作对应的流水生产线进行工序分解处理，以确定所述流水生产线对应每一个紧固操作点的操作区域属性；
步骤S102，根据每一个紧固操作点的操作区域属性，确定每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式；
步骤S103，根据每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式，获取每一个紧固操作点对应的垂直监控视频；
步骤S104，根据每一个紧固操作点对应的垂直监控视频，对所述预设器件紧固操作识别算法进行训练处理。


3.如权利要求2所述的基于监控视频的器件紧固操作的检测方法，其特征在于：
在所述步骤S101中，对所述器件紧固操作对应的流水生产线进行工序分解处理，以确定所述流水生产线对应每一个紧固操作点的操作区域属性具体包括，
获取所述流水生产线中对于加工对象不同待紧固部件对应的紧固操作工序，以确定所述不同待紧固部件对应的紧固操作点关于内部环境和/或外部环境的所述操作区域属性；
或者，
在所述步骤S102中，根据每一个紧固操作点的操作区域属性，确定每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式具体包括，
步骤S1021，根据每一个紧固操作点的操作区域属性，确定所述每一个紧固操作点在所述生产流水线中的紧固操作空间信息、紧固操作障碍信息和紧固操作允许时间信息中的至少一者；
步骤S1022，根据所述紧固操作空间信息、所述紧固操作障碍信息和所述紧固操作允许时间信息中的至少一者，确定摄像头相对于所述紧固操作点的垂直布置方式和/或所述摄像头的拍摄焦距和/或所述摄像头的抓拍频率；
或者，
在所述步骤S103中，根据每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式，获取每一个紧固操作点对应的垂直监控视频具体包括
在确定每一个紧固操作点对应的摄像头布置方式和/或摄像头拍摄模式后，向所有紧固操作点对应的摄像头发送拍摄触发控制时序信号，以使每一个紧固操作点对应的摄像头按照特定的时序获取关于其对应紧固操作点的垂直监控视频；
或者，
在所述步骤S104中，根据每一个紧固操作点对应的垂直监控视频，对所述预设器件紧固操作识别算法进行训练处理具体包括，
对每一个紧固操作点对应的垂直监控视频进行训练图像帧的解码摘选处理，并将摘选得到的若干帧垂直监控图像输入至所述预设器件紧固操作识别算法中，以实现所述训练处理。


4.如权利要求1所述的基于监控视频的器件紧固操作的检测方法，其特征在于：
在所述步骤S2中，根据经过所述训练处理的所述预设器件紧固操作识别算法，对实时获得的垂直监控视频进行不同操作元素的识别处理具体包括，
步骤S201，获取经过所述训练处理的所述预设器件紧固操作识别算法的容差度，并根据所述容差度确定对所述实时获得的垂直监控视频的解码模式；
步骤S202，根据所述解码模式，对所述实时获得的垂直监控视频进行解码处理，以获得在时间上连续的若干帧解码图像；
步骤S203，对所述若干帧解码图像进行静态操作元素识别处理和/或动态操作元素识别处理，以获得关于当前垂直监控视频的静态操作元素和/或动态操作元素。


5.如权利要求4所述的基于监控视频的器件紧固操作的检测方法，其特征在于：
在所述步骤S201中，获取经过所述训练处理的所述预设器件紧固操作识别算法的容差度，并根据所述容差度确定对所述实时获得的垂直监控视频的解码模式具体包括，
获取所述预设器件紧固操作识别算法对不同分辨率视频的识别容差度，并根据所述实时获得的垂直监控视频的实际分辨率，来获得具有相应解码精确度的不同解码模式；
或者，
在所述步骤S202中，根据所述...

【专利技术属性】
技术研发人员：任永建，师天磊，许志强，孙昌勋，
申请(专利权)人：北京容联易通信息技术有限公司，
类型：发明
国别省市：北京;11