一种基于行为识别的站点无纸化稽查管理系统技术方案

本发明专利技术涉及一种基于行为识别的站点无纸化稽查管理系统，涉及数据管理技术领域，该系统包括：数据采集模块，包括RGB图像采集子单元和红外图像采集子单元；特征提取模块，用于提取M帧RGB图像的高维化特征以及M帧红外图像的高维化特征；其中，M为正整数；特征融合模块，用于将所述M帧RGB图像的高维化特征以及所述M帧红外图像的高维化特征进行融合，得到目标张量；行为识别模块，用于基于所述目标张量输出预测动作；其中，所述预测动作为预设的动作集合中的至少一种；人员管理模块，用于基于所述预测动作、所述M帧RGB图像及所述M帧红外图像的获取时间进行人员行为管理。通过上述方式，能够提高人员行为识别的准确度。能够提高人员行为识别的准确度。能够提高人员行为识别的准确度。

【技术实现步骤摘要】
一种基于行为识别的站点无纸化稽查管理系统


[0001]本专利技术涉及数据管理
，尤其是一种基于行为识别的站点无纸化稽查管理系统。

技术介绍

[0002]站点无纸化稽查管理系统是一种现代化的管理工具，旨在通过数字化技术的应用，实现对站点稽查工作的高效、无纸化管理。该系统通过集成多种功能模块，提供了全面的稽查管理解决方案。在这个系统中，采用了电子化的方式来代替传统的纸质文件和表格，以提高工作效率和数据准确性。通过电子化的稽查表单和报告，稽查人员可以方便地记录和上传各种信息，如现场巡查情况、安全隐患、违规行为等，而无需纸质文件的传递和整理。该系统还具备强大的数据管理和分析功能，能够对稽查数据进行整理、存储和分析。通过对数据的统计和可视化展示，管理者能够更直观地了解站点的稽查情况，发现问题和趋势，并作出相应的调整和决策。
[0003]无纸化稽查管理系统可以实现稽查人员在现场进行数据采集、记录和上传等工作，避免了纸质文件的来回传递和整理，节省了大量的时间和精力，提高了工作效率。通过无纸化稽查管理系统，稽查管理部门可以实时获取和分析现场稽查数据，快速做出决策和安排。同时，也为进一步的数据分析和挖掘提供了基础，帮助优化稽查管理流程和工作策略。除此之外，纸化稽查管理系统可以实现稽查管理部门内部的信息共享和协作，不同稽查人员可以共享现场稽查数据和案件信息，提高工作的协同效率和准确性。随着物联网技术的发展，越来越多的传感器集成在了站点无纸化稽查管理系统中，如指纹识别设备、监控摄像头等。其中，监控摄像头作为站点必备设备已经广泛接入到了站点无纸化稽查管理系统中。深度学习的兴起提高了智能系统的自主化水平，行为识别作为监测人动作状态的先进技术正不断被引入到站点无纸化稽查管理系统中。目前，多利用的是RGB（Red,Green,Blue）摄像头对工作人员的行为进行识别，但当在光照不充分的夜晚时(无日光有灯光)，RGB摄像头所捕获的图像便会存在光照弱区，当工作人员进入光照弱区时，其影像信息会丢失严重，从而导致行为无法识别。

技术实现思路

[0004]为解决上述现有技术问题，本专利技术提供一种基于行为识别的站点无纸化稽查管理系统，以解决上述技术问题。
[0005]第一方面，本专利技术实施例提供一种基于行为识别的站点无纸化稽查管理系统，包括：数据采集模块，包括RGB图像采集子单元和红外图像采集子单元；其中，所述RGB图像采集子单元用于获取站点的多帧RGB图像，所述红外图像采集子单元用于获取所述站点的多帧红外图像；特征提取模块，用于提取M帧RGB图像的高维化特征以及M帧红外图像的高维化特征；其中，M为正整数；特征融合模块，用于将所述M帧RGB图像的高维化特征以及所述M帧红外图像的高维化特征进行融合，得到目标张量；行为识别模块，用于基于所述目标张量输
出预测动作；其中，所述预测动作为预设的动作集合中的至少一种；人员管理模块，用于基于所述预测动作、所述M帧RGB图像及所述M帧红外图像的获取时间进行人员行为管理。
[0006]可选地，在一些实施中，所述特征提取模块还具体用于提取所述M帧RGB图像的高维化特征、所述M帧RGB图像的像素语义集合以及所述M帧红外图像的高维化特征；所述特征融合模块还具体用于基于所述M帧RGB图像的像素语义集合对所述M帧红外图像的高维化特征进行处理，将处理后的M帧红外图像的高维化特征以及所述M帧RGB图像的高维化特征进行融合，得到所述目标张量。
[0007]可选地，在一些实施中，所述特征融合模块还具体用于以所述M帧RGB图像的像素语义集合为基础对除人物本体以及人物周边环境的像素在所述M帧红外图像的高维化特征中进行赋零操作，得到所述处理后的M帧红外图像的高维化特征；赋零操作的表达式包括：；其中，表示所述M帧红外图像的高维化特征； 表示所述M帧RGB图像的像素语义集合；表示所述处理后的M帧红外图像的高维化特征；表示赋零函数。
[0008]可选地，在一些实施中，所述特征提取模块，还具体用于，以三秒为一个间隔，从三秒内的多帧RGB图像中筛选出所述M帧RGB图像，以及以三秒为一个间隔，从三秒内的多帧红外图像中筛选出所述M帧红外图像。
[0009]可选地，在一些实施中，所述特征提取模块，还具体用于，以三秒为一个间隔，从三秒内的多帧RGB图像中筛选出三十帧RGB图像，以及以三秒为一个间隔，从三秒内的多帧红外图像中筛选出三十帧红外图像。
[0010]可选地，在一些实施中，所述特征提取模块，还具体用于根据所述M帧RGB图像与所述M帧红外图像的最小时间戳，将所述M帧RGB图像与所述M帧红外图像一一进行匹配。
[0011]可选地，在一些实施中，所述特征提取模块，还具体用于从三秒内的多帧RGB图像中进行等间隔抽样，以筛选出所述M帧RGB图像，以及以三秒为一个间隔，从三秒内的多帧红外图像中进行等间隔抽样，以筛选出所述M帧红外图像。
[0012]可选地，在一些实施中，所述行为识别模块为基于Transformers模型所构建；其中，所述Transformers模型在注意力模块的最后一个线性层添加有偏置。
[0013]可选地，在一些实施中，所述人员管理模块，还具体用于响应于所述预测动作存在违规行为，或响应于所述预测动作在所述获取时间内存在违规行为，将所述违规行为上报至管理平台。
[0014]可选地，在一些实施中，所述人员管理模块，还具体用于获取每个工作人员的员工信息，以及基于所述预测动作、所述M帧RGB图像及所述M帧红外图像的获取时间，确定在所述M帧RGB图像中识别出的工作人员是否存在违规行为。
[0015]本专利技术的有益效果体现在，本专利技术实施例提供的基于行为识别的站点无纸化稽查管理系统，在数据采集模块中集成有RGB图像采集子单元和红外图像采集子单元，并通过特征提取模块将提取M帧RGB图像的高维化特征以及M帧红外图像的高维化特征，然后，再将M帧RGB图像的高维化特征以及M帧红外图像的高维化特征进行融合，得到目标张量，最后，利用目标张量进行人员行为识别。通过上述方式，能够提高人员行为识别的准确度，即使在光照弱区（如夜晚或站点光照不充足的地点），也能够有效地获取到用于人员行为识别的影像
信息。换言之，相较于现有技术，本专利技术实施例提供的基于行为识别的站点无纸化稽查管理系统识别精度高。
附图说明
[0016]图1为本专利技术所提供的一种基于行为识别的站点无纸化稽查管理系统的模块框图；
[0017]图2为本专利技术所提供的一种数据采集模块的模块框图；
[0018]图3为本专利技术所提供的一种基于行为识别的站点无纸化稽查管理方法的步骤流程图。
具体实施方式
[0019]下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0020]请参考图1...

【技术保护点】

【技术特征摘要】
1.一种基于行为识别的站点无纸化稽查管理系统，其特征在于，包括：数据采集模块，包括RGB图像采集子单元和红外图像采集子单元；其中，所述RGB图像采集子单元用于获取站点的多帧RGB图像，所述红外图像采集子单元用于获取所述站点的多帧红外图像；特征提取模块，用于提取M帧RGB图像的高维化特征以及M帧红外图像的高维化特征；其中，M为正整数；特征融合模块，用于将所述M帧RGB图像的高维化特征以及所述M帧红外图像的高维化特征进行融合，得到目标张量；行为识别模块，用于基于所述目标张量输出预测动作；其中，所述预测动作为预设的动作集合中的至少一种；人员管理模块，用于基于所述预测动作、所述M帧RGB图像及所述M帧红外图像的获取时间进行人员行为管理。2.根据权利要求1所述的基于行为识别的站点无纸化稽查管理系统，其特征在于，所述特征提取模块还具体用于提取所述M帧RGB图像的高维化特征、所述M帧RGB图像的像素语义集合以及所述M帧红外图像的高维化特征；所述特征融合模块还具体用于基于所述M帧RGB图像的像素语义集合对所述M帧红外图像的高维化特征进行处理，将处理后的M帧红外图像的高维化特征以及所述M帧RGB图像的高维化特征进行融合，得到所述目标张量。3.根据权利要求2所述的基于行为识别的站点无纸化稽查管理系统，其特征在于，所述特征融合模块还具体用于以所述M帧RGB图像的像素语义集合为基础对除人物本体以及人物周边环境的像素在所述M帧红外图像的高维化特征中进行赋零操作，得到所述处理后的M帧红外图像的高维化特征；赋零操作的表达式包括：；其中，表示所述M帧红外图像的高维化特征；表示所述M帧RGB图像的像素语义集合；表示所述处理后的M帧红外图像的高维化特征；表示赋零函数。4.根据权利要求1所述的基于行为识别的站点无纸化稽查管理系统，其特征在于，所述特征提取模块，还具体用于，...

【专利技术属性】
技术研发人员：钟毅，仝庆，汪虎，
申请(专利权)人：四川中交信通网络科技有限公司，
类型：发明
国别省市：