基于深度学习的攀爬行为识别方法、装置、设备和介质制造方法及图纸

本申请涉及一种基于深度学习的攀爬行为识别方法、装置、设备和介质。所述方法包括：数据预处理步骤，其为采集不同场景下的攀爬行为的监控视频图像，并进行标定；网络结构搭建步骤，其为搭建采用级联网络和多任务分支结构组合的方式进行人员攀爬行为的识别的网络结构；网络模型训练步骤，其为将标定好的监控视频图像送入网络结构中进行网络模型训练；网络模型验证步骤，其为是对训练得到的网络模型进行效果验证。采用本方法采用多任务分支结构更加鲁棒，适用不同条件下的监控场景；采用多任务分支结构以及级联网络，可以形成很好的呼应，人体骨骼点和人员行为的双重识别分析，可以进一步提升攀爬行为识别精度。步提升攀爬行为识别精度。步提升攀爬行为识别精度。

【技术实现步骤摘要】
基于深度学习的攀爬行为识别方法、装置、设备和介质


[0001]本申请涉及行为识别
，特别是涉及一种基于深度学习的攀爬行为识别方法、装置、计算机设备和存储介质。

技术介绍

[0002]随着工业园区、厂区等场所智能化的普及，如何有效的对攀爬行为进行识别分析，是智能视频监控领域中一块重要的内容。攀爬行为识别可以及时反馈人员攀爬围栏、围墙等信息，对监控视频自动识别分析，发出对应的告警信息，从而减少安防人员的时间和精力。
[0003]作为视频监控领域研究的重要部分，基于人员攀爬行为的识别分析受到了广泛的研究。有人利用传统算法，提取监控场景中的目标行为特征，然后利用分类网络对特征进行建模分类；有人利用深度学习提取出监控场景中的人员目标，然后进行特征分类，得到是否攀爬的行为；有人采用级联网络，首先提取出监控场景中的人员目标，其次提取人员目标的骨架特征，然后进行特征分类。
[0004]如上文所述，现有的解决方案对攀爬行为识别进行了深入研究，然而，依旧存在各种问题。
[0005]第一、作为传统提取特征的方法，该方案存在天然的局限性，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于深度学习的攀爬行为识别方法，其特征在于，包括：数据预处理步骤，其为采集不同场景下的攀爬行为的监控视频图像，并进行标定；网络结构搭建步骤，其为搭建采用级联网络和多任务分支结构组合的方式进行人员攀爬行为的识别的网络结构；网络模型训练步骤，其为将标定好的监控视频图像送入网络结构中进行网络模型训练；网络模型验证步骤，其为是对训练得到的网络模型进行效果验证。2.根据权利要求1所述的基于深度学习的攀爬行为识别方法，其特征在于，所述数据预处理步骤步骤，包括：采集不同场景下的攀爬行为的监控视频图像；对所述采集监控视频图像集合进行标定，标定出场景中人员位置框、人体骨骼点坐标以及是否攀爬；对所采集的攀爬行为监控视频图像进行图像增广处理，与所采集的攀爬行为监控视频图像共同形成采集监控视频图像集合。3.根据权利要求2所述的基于深度学习的攀爬行为识别方法，其特征在于，所述采集不同场景下的攀爬行为的监控视频图像步骤，包括：在不同天气条件、不同时间段下、不同采光情况下采集攀爬行为的监控视频图像；所采集的攀爬行为的监控视频图像中的攀爬行为包括蹲、站、爬、攀爬和奔跑。4.根据权利要求2所述的基于深度学习的攀爬行为识别方法，其特征在于，所述对所采集的攀爬行为监控视频图像进行图像增广处理，与所采集的攀爬行为监控视频图像共同形成采集监控视频图像集合步骤，包括：获取采集的攀爬行为的监控视频图像，形成采集样本；对所述采集样本中的监控视频图像进行图像旋转、图像缩放、图像颜色空间变换以及图像仿射变换处理，形成图像增广样本；将所述图像增广样本与所述采集样本中的监控视频图像共同形成采集监控视频图像集合。5.根据权利要求1所述的基于深度学习的攀爬行为识别方法，其特征在于，所述网络结构搭建步骤，包括：在YOLO
‑
v7网络结构的基础上降低输入图像尺寸，以降低网络模型的整体计算量；删除YOLO
‑
v7网络结构中的backbone，采用轻量级网络作为整个...

【专利技术属性】
技术研发人员：尹枫，
申请(专利权)人：江苏泰亿龙科技有限公司，
类型：发明
国别省市：