一种多光谱多传感器协同处理方法及装置、存储介质制造方法及图纸

一种多光谱多传感器协同处理方法及装置、存储介质，所述多光谱多传感器协同处理方法包括：获取多个通道的图像，每个通道的图像为一个单色图像，且不同通道的图像的颜色不同；根据所述单色图像进行目标检测、识别和跟踪，生成针对所述目标的跟踪框，保存所述跟踪框的信息；对所述多个通道的图像进行配准融合，生成融合图像，将保存的所述跟踪框的信息叠加到所述融合图像。本实施例提供的方案，通过采集多通道图像可以减少色彩失真，且通过单色图像进行目标跟踪可以实现快速跟踪，避免配准融合时延造成跟踪失败。延造成跟踪失败。延造成跟踪失败。

A multispectral multisensor collaborative processing method, device and storage medium

【技术实现步骤摘要】
一种多光谱多传感器协同处理方法及装置、存储介质


[0001]本文涉及图像处理技术，尤指一种多光谱多传感器协同处理方法及装置、存储介质。

技术介绍

[0002]单图像传感器的摄像机采用拜耳格式成像，图像中的每个像素点在传感器中只能采集RGB三色中的其中一个信息，另外两个信息来自周围的像素点，导致图像采集颜色失真。在一技术方案中，可以采用三个图像传感器分别进行RGB三色的采集，然后进行配准和融合，生成可见光彩色图像。但是，配准融合需要消耗时间，增加了成像的时延，对于快速移动的车辆等目标进行跟踪容易跟丢。

技术实现思路

[0003]本申请实施例提供了一种多光谱多传感器协同处理方法及装置、存储介质，可以实现目标的跟踪。
[0004]本申请实施例提供了一种多光谱多传感器协同处理方法，包括：获取多个通道的图像，每个通道的图像为一个单色图像，且不同通道的图像的颜色不同；根据所述单色图像进行目标检测、识别和跟踪，生成针对所述目标的跟踪框，保存所述跟踪框的信息；对所述多个通道的图像进行配准融合，生成融合图像，将保存的所述跟踪框的信息叠加到本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多光谱多传感器协同处理方法，其特征在于，包括：获取多个通道的图像，每个通道的图像为一个单色图像，且不同通道的图像的颜色不同；根据所述单色图像进行目标检测、识别和跟踪，生成针对所述目标的跟踪框，保存所述跟踪框的信息；对所述多个通道的图像进行配准融合，生成融合图像，将保存的所述跟踪框的信息叠加到所述融合图像。2.根据权利要求1所述的多光谱多传感器协同处理方法，其特征在于，所述将保存的所述跟踪框的信息叠加到所述融合图像包括：将保存的最新的跟踪框的信息叠加到所述融合图像。3.根据权利要求1所述的多光谱多传感器协同处理方法，其特征在于，所述通道包括红色通道；所述根据所述单色图像进行目标检测、识别和跟踪包括：当前环境光照强度小于预设光照强度阈值时，选择红色通道的近红外图像进行目标检测、识别和跟踪。4.根据权利要求1所述的多光谱多传感器协同处理方法，其特征在于，所述根据所述单色图像进行目标检测、识别和跟踪包括：当前环境光照强度大于等于预设光照强度阈值，获取每个通道的图像的像素值的和，当存在第一通道的图像的像素值的和大于每个其他通道的图像的像素值的和，且第一通道的图像的像素值的和与至少一个其他通道的图像的像素值的和的差值大于预设值时，选择除所述第一通道外的一个或多个通道的单色图像进行目标检测、识别和跟踪。5.根据权利要求1所述的多光谱多传感器协同处理方法，其特征在于，所述根据所述单色图像进行目标检测、识别和跟踪包括：当前环境光照强度大于等于预设光照强度阈值时，获取每个通道的图像的像素值的和，且对任意第一通道和第二通道，第一通道的图像的像素值之和与第二通道的图像的像素值之和的差值小于预设值时，选择全部通道的单色图像进行目标检测、识别和跟踪。6.根据权利要求4或5所述的多光谱多传感器协同处理方法，其特征...

【专利技术属性】
技术研发人员：周迪，陈书界，王勋，张鹏国，徐爱华，王威杰，
申请(专利权)人：浙江宇视科技有限公司，
类型：发明
国别省市：