一种基于深度特征的显著性目标检测方法技术

本发明专利技术公开了一种基于深度特征的显著性目标检测方法，通过获取图像超像素的深度特征矩阵，对主成分深度特征进行显著性计算得到多个分割尺度下的显著图，利用加权元胞自动机对多尺度显著图进行进行迭代融合，得到最终的显著图；能有效解决维度灾难带来的显著性区域不明显问题，可以应用到图像检索、图像分割、图像分类和目标识别等场景。

A method of saliency detection based on depth feature

The invention discloses a saliency target detection method based on depth features. By acquiring the depth feature matrix of image super-pixels, saliency calculation of principal component depth features is carried out to obtain saliency maps under multiple segmentation scales, and the weighted cellular automata is used to iteratively fuse multi-scale saliency maps to obtain the most salient maps. The final salient map can effectively solve the salient region obscurity problem caused by dimension disaster, and can be applied to image retrieval, image segmentation, image classification and target recognition scenarios.

【技术实现步骤摘要】
一种基于深度特征的显著性目标检测方法
本专利技术涉及一种基于深度特征的显著性目标检测方法，属于图像识别

技术介绍
随着智能设备和社会网络的发展，如何利用有限的时间和精力从大量的数据中提取有用的信息，为后续处理做准备成为一个重要的问题。正如人类视觉系统只能聚焦于所看到的场景中最引人注目的少量信息一样，一张图像中往往只有部分突出的物体能吸引我们的注意。显著性检测是指识别图像中最吸引人注意的区域，因其在图像处理和计算机视觉领域的广泛应用，如图像检索、图像分割、图像分类和目标识别等等，近几年已成为一个热门的研究领域。目前，显著性检测的研究方法主要分为两种，一种是视点预测，即根据人眼在眼动仪的注视移动情况来判断图像显著的大致区域；另一种是显著性物体检测，即检测图像中最显著的物体。而显著性物体检测又可以分为自底向上和自顶向下这两种模型，前者主要基于一些图像的底层特征(如颜色、亮度、方向等)和先验信息(如紧凑度、唯一性、背景等)，而后者主要通过对图像中有代表性的特征进行标注、训练再检测。现有的方法提取的深度特征的维度高、计算复杂，存在维度灾难带来的显著性区域不明显问题。
技术实现思路
本专利技术提供了一种基于深度特征的显著性目标检测方法，解决了维度灾难带来的显著性区域不明显问题。为了解决上述技术问题，本专利技术所采用的技术方案是：一种基于深度特征的显著性目标检测方法，包括以下步骤，对图像进行超像素分割，获取图像所有超像素的深度特征矩阵；通过主成分深度特征进行显著性计算，得到多个分割尺度下的显著图；利用加权元胞自动机对多尺度显著图进行迭代融合，得到最终的显著图。对图像进行超像素分割，确定每个超像素的输入区域，将确定好的输入区域送入Alexnet网络，得到深度特征，然后得到图像所有超像素的深度特征矩阵。基于主成分分析，提取主成分深度特征，根据主成分深度特征计算有目标先验的显著值，得到多个分割尺度下的显著图。利用PCA算法计算深度特征矩阵的转换矩阵，获取主成分深度特征。设置不同分割尺度显著图的权重，利用加权元胞自动机对多尺度显著图进行迭代融合，得到最终的显著图。不同分割尺度显著图的权重公式为，其中，wi为分割尺度为i的显著图权重，wi-1为分割尺度为i-1的显著图权重，α为常数，Ni为二值化目标先验图中标记为1的像素数量，ni为相同位置上二值化目标先验图标记为1且当前分割尺度显著图二值化后也为1的像素数量。最终显著图公式为，其中，为经过N2次迭代后得到的最终显著图，M为多尺度显著图的数量，为第m幅显著图经过N2次迭代得到的显著图。本专利技术所达到的有益效果：本专利技术通过获取图像超像素的深度特征矩阵，对主成分深度特征进行显著性计算得到多个分割尺度下的显著图，利用加权元胞自动机对多尺度显著图进行进行迭代融合，得到最终的显著图；能有效解决维度灾难带来的显著性区域不明显问题，可以应用到图像检索、图像分割、图像分类和目标识别等场景。附图说明图1为本专利技术的流程图；图2为基于深度特征的显著性目标检测架构图。具体实施方式下面结合附图对本专利技术作进一步描述。以下实施例仅用于更加清楚地说明本专利技术的技术方案，而不能以此来限制本专利技术的保护范围。如图1所示，一种基于深度特征的显著性目标检测方法，包括以下步骤：步骤1，对图像进行超像素分割，获取图像所有超像素的深度特征矩阵。具体过程为：对图像进行超像素分割，确定每个超像素的输入区域，将确定好的输入区域送入Alexnet网络，得到深度特征，然后得到图像所有超像素的深度特征矩阵。定义图像I，多尺度分割数为N，分割尺度为i，根据分割尺度是否为1，执行不同的操作；若分割尺度为1，则确定每个超像素的输入区域Rectself、Rectlocal和Rectglobal，将确定好的输入区域送入Alexnet网络，提取深度特征[Fself,Flocal,Fglobal]，将所有超像素的深度特征构成深度特征矩阵；其中，Rectself是指每个超像素所在的最小矩形区域，Rectlocal是包含自身及其相邻超像素的最小矩形区域，Rectglobal为整幅图像作为矩形输入区域，Fself,Flocal,Fglobal分别对应输入区域Rectself、Rectlocal和Rectglobal的深度特征。步骤2，通过主成分深度特征进行显著性计算，得到多个分割尺度下的显著图。具体过程为：基于主成分分析，提取主成分深度特征，根据主成分深度特征计算有目标先验的显著值，得到多个分割尺度下的显著图。利用PCA算法计算深度特征矩阵的转换矩阵，获取主成分深度特征。步骤3，利用加权元胞自动机对多尺度显著图进行迭代融合，得到最终的显著图。具体过程为：设置不同分割尺度显著图的权重，利用加权元胞自动机对多尺度显著图进行迭代融合，得到最终的显著图。不同分割尺度显著图的权重公式为：其中，wi为分割尺度为i的显著图权重，wi-1为分割尺度为i-1的显著图权重，α为常数，Ni为二值化目标先验图(目标先验可以理解为显著性检测中一种比较通用的说法，目标先验图是通过一系列的计算后得到的结果；首先对图像进行多尺度超像素分割，将每个尺度下的每个超像素提取平均颜色特征和空间位置坐标作为特征向量，然后获取显著目标的粗略位置，将其作为下一个分割尺度检测时的目标先验知识，用以指导预选目标区域提取，进行自适应阈值分割即可以得到二值化的目标先验图)中标记为1的像素数量，ni为相同位置(是指在二值化目标先验图上的某一位置和当前尺度显著图二值化后的图对应的同一位置)上二值化目标先验图标记为1且当前分割尺度显著图二值化后也为1的像素数量。在M1层加权元胞自动机中，显著图中的每一个超像素点就是一个元胞，在任一显著图中的元胞都有M1-1个邻居，分别位于其他显著图上相同的位置，用元胞i′的显著值表示其作为前景F的概率P(i′∈F)＝Si′，属于背景B的概率可用P(i′∈B)＝1-Si′表示，通过提取每一幅图的适应性阈值，用γm表示第m幅显著图的二值化阈值，并对其进行二值化处理，如果元胞i′的显著值Si′≥γm，则将其标记为前景，并用ηi′＝+1表示，相反，则ηi′＝-1，表示元胞i′为背景。如果元胞i′被标记为前景，则它在其他显著图上相同位置的邻居j′被标记为前景的概率λ＝P(ηi′＝+1|i′∈F)，同样，可用μ＝P(ηi′＝+1|i′∈B)表示元胞i′标记背景时，其邻居j′成为背景的概率，假定λ与μ是一对相等的常量，则后验概率P(i′∈F|ηi′＝+1)可用下式表示：P(i′∈F|ηi′＝+1)∝P(i′∈F)P(ηi′＝+1|i′∈F)＝Si′·λ将先验概率比定义为Λ(i′∈F)，计算公式如下：则后验概率比Λ(i′∈F|ηi′＝+1)可表示如下：对上式作l＝ln(Λ)变换，形式如下：其中，l(i′∈F|ηi′＝+1)＝ln(Λ(i′∈F|ηi′＝+1))，l(i′∈F)＝l(Λ(i′∈F))，为了便于表示加权元胞自动机的更新机制，将先验概率比和后验概率比表示如下：其中，Si′t表示元胞i′在t时刻的显著值，同步更新机制f:SM1-1→S定义如下：其中，Smt+1为t+1时刻第m幅显著图上所有元胞的显著值，为第m幅显著图t+1时刻所有加权元胞自动机的状态，Smt为t时刻第m幅显著图上所有本文档来自技高网...

【技术保护点】
1.一种基于深度特征的显著性目标检测方法，其特征在于：包括以下步骤，对图像进行超像素分割，获取图像所有超像素的深度特征矩阵；通过主成分深度特征进行显著性计算，得到多个分割尺度下的显著图；利用加权元胞自动机对多尺度显著图进行迭代融合，得到最终的显著图。

【技术特征摘要】
1.一种基于深度特征的显著性目标检测方法，其特征在于：包括以下步骤，对图像进行超像素分割，获取图像所有超像素的深度特征矩阵；通过主成分深度特征进行显著性计算，得到多个分割尺度下的显著图；利用加权元胞自动机对多尺度显著图进行迭代融合，得到最终的显著图。2.根据权利要求1所述的一种基于深度特征的显著性目标检测方法，其特征在于：对图像进行超像素分割，确定每个超像素的输入区域，将确定好的输入区域送入Alexnet网络，得到深度特征，然后得到图像所有超像素的深度特征矩阵。3.根据权利要求1所述的一种基于深度特征的显著性目标检测方法，其特征在于：基于主成分分析，提取主成分深度特征，根据主成分深度特征计算有目标先验的显著值，得到多个分割尺度下的显著图。4.根据权利要求3所述的一种基于深度特征的显著性目标检测方法，其特征在于：利用PCA算法计...

【专利技术属性】
技术研发人员：李巍，申扬，刚毅凝，王鸥，郑善奇，郝跃冬，刘嘉华，康睿，
申请(专利权)人：国网辽宁省电力有限公司信息通信分公司，南瑞集团有限公司，南京南瑞信息通信科技有限公司，
类型：发明
国别省市：辽宁,21