一种异构混合高性能视频处理与智能计算方法技术

技术编号:34773256 阅读:12 留言:0更新日期:2022-08-31 19:39
本发明专利技术公开了一种异构混合高性能视频处理与智能计算方法,其特征是,基于MPSOC系统,将视频通过PCI总线传入后进行视频解码,视频解码后对视频进行预处理,视频会被转化为单帧的图像,每帧图像都会进行单独处理,包括时序生成、存储和锁定目标跟踪处理,时序生成和存储后通过电子变倍对图像进行增强,结合锁定目标跟踪区域进行字符显示以及跟踪框的叠加,待每一帧图像都跟踪完毕后进行视频的解码处理,视频解码后形成的视频通过PCI总线输出到VME总线。这种异构混合高性能视频处理与智能计算方法可以兼顾不同类型的计算任务需求,提高高性能计算机处理器的计算适应性,扩展性更好,可更充分地发挥异构混合处理器中不同设备的计算特性。计算特性。计算特性。

【技术实现步骤摘要】
一种异构混合高性能视频处理与智能计算方法


[0001]本专利技术涉及视频处理领域,尤其涉及一种异构混合高性能视频处理与智能计算方法。

技术介绍

[0002]近些年,图形处理器(GPU)由于具有高并行性的特点,在高性能计算等领域得到了充分的应用。然而,由于GPU特有的以线程组SIMT的执行方式执行指令,对访存方式有较高的要求。通常,越规则、密集的计算任务越容易发挥GPU的硬件性能,反之性能较弱;同时,GPU的内存和CPU的内存是分离的,对于大数据应用,有限的内存容量和经过PCIE的数据传输也是影响GPU可用性的一大挑战。针对这一问题,硬件设计厂商推出了将CPU和GPU集成在一个芯片的异构融合处理器,兼顾两者优点。
[0003]这些优势使得异构融合处理器具有更广泛的应用前景,但如何利用好异构融合处理器仍充满挑战:首先,异构融合处理器还处于发展阶段,许多设计并不完善;其次,充分发挥异构融合处理器的性能需要对CPU和GPU进行不同的体系结构优化,并且需要考虑额外的多设备任务分配,这增加了异构融合处理器的编程难度;再次,异构融合处理器上相集成的设备具有多样性,不仅局限于GPU,CPU设备的集成。例如,目前也出现了FPGA和CPU相集成的异构融合处理器。
[0004]随着GPU的可编程性不断增强,GPU的应用能力已经远远超出了图形渲染任务,利用GPU完成通用计算的研究逐渐活跃起来,将GPU用于图形渲染以外领域的计算成为GPGPU(General Purpose computing on graphics processing units,基于GPU的通用计算)。而与此同时CPU则遇到了一些障碍,CPU为了追求通用性,将其中大部分晶体管主要用于构建控制电路(比如分支预测等)和Cache,只有少部分的晶体管来完成实际的运算工作。

技术实现思路

[0005]本专利技术所要解决的技术问题是,提供一种能够实现目标跟踪的异构混合高性能视频处理与智能计算方法。
[0006]为了解决上述技术问题,本专利技术是通过以下技术方案实现的:一种异构混合高性能视频处理与智能计算方法,其特征是,基于MPSOC系统,将视频通过PCI总线传入后进行视频解码和通信与控制信息的并行处理,视频解码后对视频进行预处理,视频会被转化为单帧的图像,每帧图像都会进行单独处理,包括时序生成、存储和锁定目标跟踪处理,时序生成和存储后通过电子变倍对图像进行图像增强,结合锁定目标跟踪区域进行字符显示以及跟踪框的叠加,待每一帧图像都跟踪完毕后进行视频的解码处理以及信息解算与上报,视频解码后形成的视频连同解算与上报的信息共同通过PCI总线输出到VME总线。
[0007]进一步地,所述图像的锁定目标跟踪过程为,利用PCIE总线先对图像进行目标特征的提取与分析以及串口指令的解析,然后对目标区域进行特征提取,并进行区域跟踪。
[0008]进一步地,所述图像进行目标特征的提取与分析时存在多个目标的情况下需要进
行多目标自动检测及排序。
[0009]进一步地,所述图像的锁定目标跟踪过程中可进行目标重检。
[0010]进一步地,所述锁定目标跟踪时可进行目标模板的存储。
[0011]与现有技术相比,本专利技术的有益之处在于:这种异构混合高性能视频处理与智能计算方法可以兼顾不同类型的计算任务需求,提高高性能计算机处理器的计算适应性,可以避免加速设备和处理器分离所带来的数据传输开销,扩展性更好,可设计多级存储体系结构,分层的存储设计可更充分地发挥异构混合处理器中不同设备的计算特性,从而服务于不同的任务。
附图说明
[0012]图1是本专利技术一种异构混合高性能视频处理与智能计算方法结构示意图。
具体实施方式
[0013]下面结合附图和具体实施方式对本专利技术进行详细描述。
[0014]图1所示一种异构混合高性能视频处理与智能计算方法,其特征是,基于MPSOC系统,将视频通过PCI总线传入后进行视频解码和通信与控制信息的并行处理,视频解码后对视频进行预处理,视频会被转化为单帧的图像,每帧图像都会进行单独处理,包括时序生成、存储和锁定目标跟踪处理,锁定目标跟踪时可进行目标模板的存储,所述图像的锁定目标跟踪过程为,利用PCIE总线先对图像进行目标特征的提取与分析以及串口指令的解析,图像进行目标特征的提取与分析时存在多个目标的情况下需要进行多目标自动检测及排序,然后对目标区域进行特征提取,并进行区域跟踪, 所述图像的锁定目标跟踪过程中可进行目标重检;时序生成和存储后通过电子变倍对图像进行图像增强,结合锁定目标跟踪区域进行字符显示以及跟踪框的叠加,待每一帧图像都跟踪完毕后进行视频的解码处理以及信息解算与上报,视频解码后形成的视频连同解算与上报的信息共同通过PCI总线输出到VME总线。
[0015]这种异构混合高性能视频处理与智能计算方法可以兼顾不同类型的计算任务需求,提高高性能计算机处理器的计算适应性,可以避免加速设备和处理器分离所带来的数据传输开销,扩展性更好,可设计多级存储体系结构,分层的存储设计可更充分地发挥异构混合处理器中不同设备的计算特性,从而服务于不同的任务。
[0016]需要强调的是:以上仅是本专利技术的较佳实施例而已,并非对本专利技术作任何形式上的限制,凡是依据本专利技术的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本专利技术技术方案的范围内。
本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种异构混合高性能视频处理与智能计算方法,其特征是,基于MPSOC系统,将视频通过PCI总线传入后进行视频解码和通信与控制信息的并行处理,视频解码后对视频进行预处理,视频会被转化为单帧的图像,每帧图像都会进行单独处理,包括时序生成、存储和锁定目标跟踪处理,时序生成和存储后通过电子变倍对图像进行图像增强,结合锁定目标跟踪区域进行字符显示以及跟踪框的叠加,待每一帧图像都跟踪完毕后进行视频的解码处理以及信息解算与上报,视频解码后形成的视频连同解算与上报的信息共同通过PCI总线输出到VME总线。2.根据权利要求1所述的一种异构混合高性能视频处理与智能计算方法,...

【专利技术属性】
技术研发人员:胡浩锦李璐伍凌帆
申请(专利权)人:苏州海裕鸿智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1