System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种提升RTSP AI视频分析服务系统能力的装置制造方法及图纸_技高网

一种提升RTSP AI视频分析服务系统能力的装置制造方法及图纸

技术编号:40238723 阅读:7 留言:0更新日期:2024-02-02 22:37
本发明专利技术公开了一种提升RTSP AI视频分析服务系统能力的装置,该装置基于mpsoc ev系列器件实现,其包含了4k@60fps的硬件编解码,并且集成了FPGA,该装置主要包括:系统配置单元,配置RTSP发送接收码流地址及配置多路图像的缩放拼接参数;RTSP接收单元,用于多媒体播放控制,进行多路RTSP码流的接收;多路解码单元,进行多路码流解码;多路缩放拼接单元,对多路图像进行缩放拼接;编码单元,对缩放拼接后的图像进行编码;RTSP发送单元,提供对编码后图像的码流的访问。该装置集成了FPGA,先进行4路rtsp拉流解码拼接成算法对应的输入,然后进行编码再通过rtsp流传输图像,然后RTSP AI视频分析服务系统拉取该装置的RTSP码流,以实现4路1080p的处理,实现了高效率的同时延时也低。

【技术实现步骤摘要】

本专利技术涉及ai视频分析服务,具体为一种提升rtsp ai视频分析服务系统能力的装置。


技术介绍

1、随着人工智能的需求不断增加,人工智能服务应用领域也变得广泛,发挥着越来越大的作用,当人工智能融入到安防领域,ai分析服务器便成了企业安防智能化升级的热门产品。

2、一般的rtsp ai视频分析服务器都是由cpu+gpu或者cpu+npu的形式组成,cpu从网口接收rtsp码流中的编码图像,调用硬件解码器进行解码。再经过一定的预处理后通过gpu或者npu进行神经网络加速运算,最终输出算法分析结果,其中算法的输入图像的分辨率根据选用的模型不同一般都是固定的。当模型支持对更小粒度图像元素进行分析时,可以将多路图像进行缩放拼接,在一定程度上提升算法分析的并行处理能力。但鉴于cpu/gpu/npu都不适用于当前场景下的多路图像的实时拼接(即使勉强使用了也将占用它们的算力),这将会给系统引入较大的处理延时。


技术实现思路

1、(一)解决的技术问题

2、针对现有技术的不足,本专利技术为了解决这个问题,通过在rtsp ai视频分析服务器前端增加一个rtsp拼接缩放处理的装置提升系统处理能力。

3、(二)技术方案

4、为实现上述目的,本专利技术提供如下技术方案:一种提升rtsp ai视频分析服务系统能力的装置,该装置基于mpsoc ev系列器件实现,其包含了4k@60fps的硬件编解码,并且集成了fpga,该装置主要包括:

5、系统配置单元,配置rtsp发送接收码流地址及配置多路图像的缩放拼接参数;

6、rtsp接收单元,用于多媒体播放控制,进行多路rtsp码流的接收;

7、多路解码单元,进行多路码流解码;

8、多路缩放拼接单元,对多路图像进行缩放拼接;

9、编码单元,对缩放拼接后的图像进行编码;

10、rtsp发送单元,提供对编码后图像的码流的访问。

11、优选的,所述fpga在视频分析中对图像信号进行采集、预处理和输出,主要包括:

12、图像输入模块,采集图像数据,并将其转换成数字信号传输至fpga;

13、图像处理模块,对采集的图像数据进行处理,包括降噪、滤波、图像缩放+图像拼接、边缘检测、图像增强等;

14、图像输出模块,对缩放拼接后的图像再次进行编码并传输至视频分析服务系统。

15、优选的,该装置处理流程包括:

16、s1、通过系统配置单元对装置进行系统的配置;

17、s2、通过rtsp接收单元接收装置网口的多路rtsp码流;

18、s3、多路解码单元对接收的多路rtsp码流进行多路解码;

19、s4、多路缩放拼接单元对解码后的玛流进行图像缩放+视频拼接显示;

20、s5、编码单元对对缩放拼接后的图像进行编码;

21、s6、将编码后的玛流打包并发送至视频分析服务系统。

22、优选的,该装置先进行4路rtsp拉流解码拼接成算法对应的输入,然后进行编码再通过rtsp流传输图像,其中解码拼接通过fpga实现。

23、优选的,该装置同时对多路rtsp码流进行解码缩放拼接编码并再次打包成1路rtsp码流,原有分析逻辑再对这路新的rtsp码流进行分析处理。

24、优选的,所述rtsp ai视频分析服务系统通过拉取该装置的rtsp码流,以实现4路1080p的处理。

25、(三)有益效果

26、与现有技术相比,本专利技术提供了一种提升rtsp ai视频分析服务系统能力的装置,具备以下有益效果:本专利技术装置基于mpsoc ev系列器件实现,系统集成了fpga,先进行4路rtsp拉流解码拼接成算法对应的输入,然后进行编码再通过rtsp流传输图像,然后rtsp ai视频分析服务系统拉取该装置的rtsp码流,以实现4路1080p的处理,实现了高效率的同时延时也低。

本文档来自技高网...

【技术保护点】

1.一种提升RTSP AI视频分析服务系统能力的装置,其特征在于,该装置基于mpsoc ev系列器件实现,其包含了4k@60fps的硬件编解码,并且集成了FPGA,该装置主要包括:

2.根据权利要求1所述的一种提升RTSP AI视频分析服务系统能力的装置,其特征在于,所述FPGA在视频分析中对视频信号进行采集、预处理和输出,主要包括:

3.根据权利要求2所述的一种提升RTSP AI视频分析服务系统能力的装置,其特征在于,该装置处理流程包括:

4.根据权利要求3所述的一种提升RTSP AI视频分析服务系统能力的装置,其特征在于,该装置先进行4路rtsp拉流解码拼接成算法对应的输入,然后进行编码再通过rtsp流传输图像,其中解码拼接通过fpga实现。

5.根据权利要求4所述的一种提升RTSP AI视频分析服务系统能力的装置,其特征在于,该装置同时对多路RTSP码流进行解码缩放拼接编码并再次打包成1路RTSP码流,原有分析逻辑再对这路新的RTSP码流进行分析处理。

6.根据权利要求5所述的一种提升RTSP AI视频分析服务系统能力的装置,其特征在于,所述RTSP AI视频分析服务系统通过拉取该装置的RTSP码流,以实现4路1080p的处理。

...

【技术特征摘要】

1.一种提升rtsp ai视频分析服务系统能力的装置,其特征在于,该装置基于mpsoc ev系列器件实现,其包含了4k@60fps的硬件编解码,并且集成了fpga,该装置主要包括:

2.根据权利要求1所述的一种提升rtsp ai视频分析服务系统能力的装置,其特征在于,所述fpga在视频分析中对视频信号进行采集、预处理和输出,主要包括:

3.根据权利要求2所述的一种提升rtsp ai视频分析服务系统能力的装置,其特征在于,该装置处理流程包括:

4.根据权利要求3所述的一种提升rtsp ai视频分析服务系统能力的装置,...

【专利技术属性】
技术研发人员:邓引梁权荣
申请(专利权)人:广州创龙电子科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1