一种视频前端智能监控系统、方法、计算机设备、终端技术方案

本发明专利技术属于视频监控技术领域，公开了一种视频前端智能监控系统、方法、计算机设备、终端，主处理器用于负责实现系统图像数据接口、对外通讯接口、图像预处理以及系统管理；协处理器用于负责卷积神经网络算法推理计算，计算结果通过板内通讯接口回传至主处理器；电源子系统用于为整个系统供电；存储子系统包括非易失性存储器、片内高速缓存以及片外动态存储器；时钟子系统采用有源晶振提供各子系统需求的各时钟源；丰富数据通信接口实现系统视频数据输入\输出、控制指令输入\输出以及板内主处理器和协处理器的数据互联。本发明专利技术通过对计算任务进行分解并分配至合理的硬件执行单元，异构加速提高算法计算速度，充分发挥系统的计算性能。性能。性能。

【技术实现步骤摘要】
一种视频前端智能监控系统、方法、计算机设备、终端


[0001]本专利技术属于视频监控
，尤其涉及一种视频前端智能监控系统、方法、计算机设备、终端。

技术介绍

[0002]目前，如今视频监控已经在各行各业有着广泛的应用，管理部门可通过前端相机获取图像数据，对突发性异常事件进行及时的监视和记忆，用以提供高效地指挥和异常情况记录。视频监控市场的飞速发展，带来的是数据的爆炸式增长，传统视频监控只是在纯粹的录像，没有有效规律的分类存储，对于海量的视频数据，数据分析人员只能根据时间来查找事故发生的录像内容，耗费大量时间且对于事故的响应严重滞后，人工监视也由于人类自身劳动力有限，容易产生漏报。传统意义上的视频监控系统已经远远不能满足各行各业应用的需求，必须极力推进视频监控系统朝着智能化方向发展。
[0003]视频前端智能监控系统可嵌入到前端相机内，实现前端相机的智能计算能力，针对海量监控摄像头所捕获的数据，通过利用视频图像处理知识实现对目标的自动检测、跟踪、识别、理解和行为分析，提炼出有用信息。对异常情况可以及时地报警，提醒人们迅速响应。针对事本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种视频前端智能监控系统，其特征在于，所述视频前端智能监控系统包括：主处理器，用于负责实现系统图像数据接口、对外通讯接口、图像预处理以及系统管理；协处理器，用于负责卷积神经网络算法推理计算，计算结果通过板内通讯接口回传至主处理器；电源子系统，用于为整个系统供电，主处理器、协处理器及其他外设单独供电，降低电源系统耦合程度，提高系统可靠性；存储子系统，用于将模型参数以及配置文件、软件代码存放在非易性存储器中，还用于将卷积神经网络模型前向推理计算过程产生的中间层特征图数据存放在片内高速缓存以及片外动态存储器中；时钟子系统，用于采用有源晶振提供各子系统需求的各时钟源；数据通信接口，用于实现不同视频接口的图像数据输入\输出、控制指令的输入\输出，并通过高速数据接口和低速指令接口实现主处理器和协处理器的数据互联。2.如权利要求1所述的视频前端智能监控系统，其特征在于，所述主处理器为Xilinx的ZU9EG，集成ARM CPU、GPU以及FPGA的可编程逻辑资源；所述协处理器为华为Hi3559A音视频处理芯片，集成高性能图像信号处理器ISP，多核ARM CPU、GPU以及神经网络加速引擎NNIE。3.如权利要求1所述的视频前端智能监控系统，其特征在于，所述电源子系统，包括：ZU9EG电源子系统由两颗IRPS5401芯片和一颗TDA21240芯片组成，电源管理接口使能IRPS5401电源芯片后，将输入12V电源转换至1.2V、1.8V、0.9V、1.2V等ZU9EG芯片所需的各路电源；使用外部独立的DC_DC电源芯片TDA21240芯片，产生能提供大电流的内核0.85V电压，以满足ZU9EG内核电压峰值电流20A的需求。4.如权利要求1所述的视频前端智能监控系统，其特征在于，所述存储子系统由非易失性存储器、片内高速缓存和片外动态存储器组成。主处理器ZU9EG和协处理器Hi3559A除了片内高速缓存，都外接DDR4动态存储器，EMMC和Flash非易失性存储器。主处理器ZU9EG的DDR4动态存储器选用4片MT40A512M16JY
‑
075EAIT芯片、eMMC选用H26M41208HPR芯片、SPI Nor Flash选用MX25U25635F芯片、SPI Nand Flash选用MX35UF2G14AC
‑
Z4I芯片；协处理器Hi3599A的DDR4动态存储器选用4片MT40A512M16JY
‑
083EAIT芯片、eMMC选用MTFC8GACAJCN
‑
4M_IT_TR芯片、SPI Nor Flash选用MT25QU512ABB8ESF
‑
0SIT芯片。5.如权利要求1所述的视频前端智能监控系统，其特征在于，所述ZU9EG时钟子系统，包括四个时钟源，系统参考时钟PS_REF_CLK、PCle参考时钟PCIe_CLK、SRIO参考时钟SRIO_CLK以及系统实时时钟PS_RTC_CLK；其中，所述PS_REF_CLK频率为33.333MHZ，所述PCe_CLK频率为100MHZ，所述SRIO_CLK频率为156.25MHZ，所述PS_RTC_CLK频率为32.768KHZ；所述Hi3559A时钟子系统包含两个时钟源：系统参考时钟XIN和系统实时时钟RTC_XIN；其中，所述XIN频率为24MHz，所述RTC_XIN频率为32.768KHz；除上述处理芯片相关时钟，硬件系统集成的以太网物理层收发器EPHY需使用25MHz的参考时钟。6.如权利要求1所述的视频前端智能监控系统，其特征在于，所述数据通信接口，包括：ZU9EG_SRIO，高速数据接口，20Gbit/s，用于系统高清视频输入\输...

【专利技术属性】
技术研发人员：颜露新，黎瑞，钟胜，曹旭航，蔡智，王健，龚恩，谭富中，朱太云，
申请(专利权)人：国网安徽省电力有限公司电力科学研究院南京汉宁信息技术有限公司，
类型：发明
国别省市：