显著性检测方法、显著性检测设备和存储介质技术

本发明专利技术公开了一种显著性检测方法、显著性检测设备和计算机可读存储介质，所述方法包括：确定第一主干网络第一目标卷积层的第一输出结果，以及第二主干网络第二目标卷积层的第二输出结果；根据所述第一输出结果确定所述第一全局描述子，以及根据所述第二输出结果确定第二全局描述子；根据所述第一全局描述子和所述第二全局描述子确定各个模态的不同通道的重要性；根据所述重要性以及所述第一输出结果确定第一模态特征，以及根据所述重要性和所述第二输出结果确定第二模态特征；基于所述第一模态特征和所述第二模态特征确定显著性检测结果。本发明专利技术旨在达成提升显著检测结果的鲁棒性的效果。性的效果。性的效果。

【技术实现步骤摘要】
显著性检测方法、显著性检测设备和存储介质


[0001]本专利技术涉及数据处理
，尤其涉及一种显著性检测方法、显著性检测设备和计算机可读存储介质。

技术介绍

[0002]在相关技术中，多模态的RGB
‑
D(RGB
‑
Depth，颜色
‑
深度)和RGB
‑
T(RGB
‑
Thermal，颜色
‑
温度)显著性目标检测主要是依靠低层线索进行融合。这一类方法将深度显著性或温度显著性作为附加信息。即前者从深度图提取深度特征与RGB(颜色系统)图像提取的特征组合获得显著图，后者从热力图提取温度特征与RGB图像提取的特征组合获得显著图。例如在RGB
‑
D显著性目标检测中，其过程一般是计算RGB图像和Depth图像中的先验，例如背景先验，中心先验与深度先验等，然后通过不同区域的颜色、亮度、纹理和深度等特征对比，并通过乘法或加法等方式和一些后处理技术进行融合，从而检测显著性目标。
[0003]由于深度图质量容易受传感器温度，背景本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种显著性检测方法，其特征在于，所述显著性检测方法包括以下步骤：确定第一主干网络第一目标卷积层的第一输出结果，以及第二主干网络第二目标卷积层的第二输出结果；根据所述第一输出结果确定所述第一全局描述子，以及根据所述第二输出结果确定第二全局描述子；根据所述第一全局描述子和所述第二全局描述子确定各个模态的不同通道的重要性；根据所述重要性以及所述第一输出结果确定第一模态特征，以及根据所述重要性和所述第二输出结果确定第二模态特征；基于所述第一模态特征和所述第二模态特征确定显著性检测结果。2.如权利要求1所述的显著性检测方法，其特征在于，所述根据所述第一输出结果确定所述第一全局描述子，以及根据所述第二输出结果确定第二全局描述子的步骤之前，还包括：获取所述第一目标卷积层的长度、宽度和通道信息和所述第二目标卷积层的长度、宽度和通道信息；所述根据所述第一输出结果确定所述第一全局描述子，以及根据所述第二输出结果确定第二全局描述子的步骤包括：根据所述第一输出结果以及所述第一目标卷积层的长度、宽度和通道信息确定所述第一全局描述子；根据所述第二输出结果以及所述第二目标卷积层的长度、宽度和通道信息确定所述第二全局描述子。3.如权利要求1所述的显著性检测方法，其特征在于，所述根据所述第一全局描述子和所述第二全局描述子确定各个模态的不同通道的重要性的步骤包括：确定所述第一全局描述子与所述第二全局描述子的第一级联结果；基于预设的激活函数与所述第一级联结果确定所述重要性。4.如权利要求1所述的显著性检测方法，其特征在于，所述重要性包括所述第一主干网络对应的第一模态的各个通道的第一重要性，以及所述第二主干网络对应的第二模态的各个通道的第二重要性，所述根据所述重要性以及所述第一输出结果确定第一模态特征，以及根据所述重要性和所述第二输出结果确定第二模态特征的步骤包括：根据所述第一重要性和所述第一输出结果的元素乘积确定所述第一模态特征，以及根据所述第二重要性和所述第二输出结果的元素乘积确定所述第二模态特征。5.如权利要求4所述的显著性检测方法，其特征在于，所述根据所述第一重要性和所述第一输出结果的元素乘积确定所述第一模态特征，以及根据所述第二重要性和所述第二输出结果的元素乘积确定所述第二模态特征的步骤之前，还包括：根据所述第一重要性和所述第一输出结果的元素乘积，以及所述第二重要性和所述第二输出结果的元素乘积之间的第二级联结果；确...

【专利技术属性】
技术研发人员：高伟，廖桂标，李革，
申请(专利权)人：北京大学深圳研究生院，
类型：发明
国别省市：