【技术实现步骤摘要】
本专利技术涉及计算机视觉和图像处理领域，尤其涉及一种基于差分模态特征融合模块的轻量化双模态目标检测方法。
技术介绍
1、目标检测技术是计算机视觉研究的重点领域之一，无论是在视频监控、城市交通、自动驾驶和军事安防等领域中都有着重要意义，发挥着至关重要的作用。在过去的几十年中，大量的研究工作都还只是基于传统的单模态彩色图像检测上，然而现如今随着科学技术的不断发展，人们逐渐发现了彩色相机的许多不足之处。彩色相机对于光照条件的变化十分敏感，在大雪、大雾或低照度环境下不能很好的捕捉有效的目标信息，导致目标缺失、模糊等情况，很难发挥其作用。红外相机通过捕捉物体表面的热辐射来获取目标物信息，对光照条件不存在依赖，可以很好的弥补可见光图像在低照度环境下的缺陷。因此，采用结合可见光相机和红外相机的双模态检测方法能够显著提高检测模型在不同环境下的检测效果，增强模型的鲁棒性。
2、多模态目标检测还存在着一些问题：一是双模态检测模型参数量大、检测速度低的问题，二是如何将多模态的信息融合起来的问题。通常双模态检测模型需要更大的存储和更大的计算能力，然...
【技术保护点】
1.一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，提出一种基于差分模态特征融合模块的轻量化双模态目标检测模型实现不同天气环境下的目标检测。
2.根据权利要求1所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，所述基于差分模态特征融合模块的轻量化双模态目标检测模型包括：双流特征提取网络、差分模态特征融合模块和照明感知模块；其中，
3.根据权利要求1所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，该方法实现步骤如下：
4.根据权利要求3所述的一种基于差分模态特征融合...
【技术特征摘要】
1.一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，提出一种基于差分模态特征融合模块的轻量化双模态目标检测模型实现不同天气环境下的目标检测。
2.根据权利要求1所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，所述基于差分模态特征融合模块的轻量化双模态目标检测模型包括：双流特征提取网络、差分模态特征融合模块和照明感知模块；其中，
3.根据权利要求1所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，该方法实现步骤如下：
4.根据权利要求3所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，步骤s2中，所述照明感知模块包括三个卷积层、三个最大池化层、一个全局平均池化层和三个全连接层。
5.根据权利要求4所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方法，其特征在于，所述卷积层采用leaky relu激活函数。
6.根据权利要求3所述的一种基于差分模态特征融合模块的轻量化双模态目标检测方...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。