一种多信源感知数据处理方法及系统技术方案

本申请实施例提供了本发明专利技术提供了一种多信源感知数据处理方法及系统，该方法包括；基于CPU，第一多模感知数据推送给FPGA模块；FPGA对推送来的多模感知数据进行分割得到若干第二多模感知数据并通过PCIE Switch的DMA通道推送至NPU；NPU初步筛选出包含目标对象的第二多模感知数据通过PCIE Switch的DMA通道推送至FPGA；FPGA模块对推送来的包含目标对象的第二感知数据进行目标对象的粗定位并融合得到第三感知数据；对第三多模感知数据进行目标对象的精确定位，得到精定位感知数据并进行融合，生成输出的目标对象定位感知数据。解决了现有技术中，单高算力卡运算效率低、避免数据标签耗费人力，且存在误判等技术问题。

【技术实现步骤摘要】

本申请实施例涉及人工智能，尤其涉及一种多信源感知数据处理方法及系统。

技术介绍

1、随着感知信息呈几何级数在增长，特别在多信源视觉信息处理任务中，单一嵌入式处理平台的实时性、数据带宽和算力面临着日渐加剧的挑战，有效的将cpu、fpga、npu等多种处理器效能发挥出来，同时优化算法模块在各个处理器中的部署方式已成为业内主流的解决方案。

2、一般需要高算力但任务相对单一重复的深度神经网络算法由npu卡来执行，如筛选算法、识别算法、辨认算法等；而一些对于算力要求不高，但需要高并行度的复杂且定制化算法则由fpga卡来执行，如图像分割算法、粗定位算法、精定位算法、多信源融合算法等；cpu居中执行各种数据调度指令。但多信源感知信息的硬件系统架构如图1所示。其中，npu和fpga处理的数据均需要经过cpu内存进行调度、缓存后，使得cpu的数据处理负担比较重。

技术实现思路

1、有鉴于此，本申请实施例所解决的技术问题之一在于提供一种多信源感知数据处理方法及系统，用以克服或者缓解现有技术中上述缺陷。

2本文档来自技高网...

【技术保护点】

1.一种多信源感知数据处理方法，其特征在于，其包括；

2.如权利要求1所述的一种多信源感知数据处理方法，其特征在于，所述方法适用于一种集成了NPU与FPGA两种高算力计算单元的构智能加速卡上。

3.如权利要求2所述的一种多信源感知数据处理方法，其特征在于，所述NPU与FPGA之间通过PCIE Switch实现互联互通，所述PCIE Switch内嵌DMA控制器，使得NPU与FPGA可以互相访问对方的内存空间。

4.如权利要求2或3任一所述的一种多信源感知数据处理方法，其特征在于，所述NPU读取FPGA内存中的感知数据的步骤包括：p>

5.如权利...

【技术特征摘要】

1.一种多信源感知数据处理方法，其特征在于，其包括；

2.如权利要求1所述的一种多信源感知数据处理方法，其特征在于，所述方法适用于一种集成了npu与fpga两种高算力计算单元的构智能加速卡上。

3.如权利要求2所述的一种多信源感知数据处理方法，其特征在于，所述npu与fpga之间通过pcie switch实现互联互通，所述pcie switch内嵌dma控制器，使得npu与fpga可以互相访问对方的内存空间。

4.如权利要求2或3任一所述的一种多信源感知数据处理方法，其特征在于，所述npu读取fpga内存中的感知数据的步骤包括：

5.如权利要求1所述的一种多信源感知数据处理方法，其特征在于，所述步骤14中将初步筛选出不包含所述目标对象的第二感知数据推送至所述npu内部的识别模块，对不包含所述目标对象的第二感知数据进行二次判断，包括：

6.如权利要求1所述的一种多信源感知数据处理方法，其特征在于，基于所述fpga模块，对推送来...

【专利技术属性】
技术研发人员：苗苗，杨国庆，
申请(专利权)人：熠芯宁波智能科技有限公司，
类型：发明
国别省市：