融合颜色对比图和颜色空间分布图的图像显著性检测方法技术

本发明专利技术公开了一种融合颜色对比图和颜色空间分布图的图像显著性检测方法。通常的自下而上的图像显著性检测方法是利用图像的颜色、亮度、边缘等底层特征来计算。本发明专利技术综合图像底层颜色对比特征图和图像颜色空间分布特征图来得到最后的显著性图。首先根据SLIC超像素分割后的图像求取图像的颜色对比特征图，接着，利用K‑Means聚类后的图像通过计算获得初步的颜色空间分布特征图，再映射到超像素分割图上，进而根据图像颜色的相似度来进一步优化颜色分布特征图。最后融合颜色对比特征图和优化后的图像颜色空间分布特征图得到最终的显著图。本发明专利技术能够在较低的时间复杂度内得到较准确、完整的显著图。

Image saliency detection method based on color contrast map and color space distribution map

The invention discloses an image saliency detection method by fusing color contrast map and color space distribution map. The usual bottom-up saliency detection method is based on the color, brightness, edge and other underlying features of the image. The present invention combines the image bottom color contrast feature map and the image color space distribution characteristic map to obtain the final saliency map. According to the contrast of color feature map image image SLIC super pixel segmentation after and then obtained by calculating the color spatial distribution map of the preliminary images with K Means after clustering, and then mapped to the super pixel segmentation map, then according to the similarity of image color to further optimize the color distribution map. Finally, the final saliency map is obtained by fusing color contrast feature map and optimized image color space distribution feature map. The present method can obtain more accurate and complete saliency maps at lower time complexity.

【技术实现步骤摘要】
融合颜色对比图和颜色空间分布图的图像显著性检测方法
本专利技术属于计算机图像处理领域，涉及检测图像的显著性区域，具体涉及融合颜色对比图和颜色空间分布图的图像显著性检测方法。
技术介绍
图像的显著性检测是将图像中最重要的、包含丰富信息的区域标记出来。显著性检测在图像分割、图像压缩、图像检索、目标识别等领域具有重要应用，对于图像的理解及处理有着重要的应用价值。如何快速准确地从大量的图像信息中检索到人们想要关注的信息是一个极其重要的课题。研究发现人类的视觉系统具有视觉选择性能力，并且人类的视觉系统主要分为两种，即自底向上策略注意机制和自顶向下策略注意机制。前者是利用图像的颜色、亮度、边缘等特征来计算，而后者主要针对图像的特定特征来计算图像的显著性区域。由于目前所检测的图像大多是不确定的、无目标的区域，因此大多数的算法均为自底向上模型。下面对国内外的基于自底向上的图像显著性检测方法进行介绍。其中，最早由Itti等人(“AModelofSaliency-BasedVisualAttentionforRapidSceneAnalysis”)于1998年提出的著名的生物启发模型，根据视觉系统的行为和神经网络结构，提取图像的亮度、颜色以及方向特征，利用中心-周边差来得到图像在不同尺度下的特征。在Itti模型的基础上Hofmann等人(“Graph-BasedVisualSaliency”)于2006年提出了基于图论的GBVS算法，该算法采用Itti的特征提取方法，把像素点(或者图像块)作为节点并计算节点间的差异得到一个带权无向图，最后利用Markov链计算最终的显著图。Zhai等人(“attentiondetectioninvideosequencesusingspatiotemporalcues”)于2006年提出的LC算法，可以通过计算每个像素与其余像素灰度信息的差异计算得到显著图，但缺少色彩信息。Hou等人(“ASpectralResidualApproach”)于2007年从频域角度提出了频谱差法SR，利用图像的傅里叶频谱与平均频谱之差做反傅里叶变换得到显著图。该方法适用于尺寸较小的显著目标，但显著图往往只有注视点区域，没有清晰边界。Achanta等人(“Salientregiondetectionandsegmentation”)于2008年提出的AC算法中，显著性被定义为图像区域相对于其在多尺度下的邻域的局部对比度，是一种全分辨算法，可得到清晰的边界信息。Achanta等人(“Frequency-tunedSalientRegionDetection”)于2009年提出一种基于DOG算子的频域调制算法FT，该算法利用图像在lab色彩空间中每个通道与色彩均值之差，可得到全局对比度的显著图。Cheng等人(“GlobalContrastbasedSalientRegionDetection”)于2011年提出了基于全局对比度的检测方法。该方法对量化后的图像建立颜色直方图，通过计算每种颜色与其他颜色之间的差异度来获取直方图对比度(HC)。利用上述直方图把图像分割为不同的颜色块，再组合空间关系来计算每个区域的显著值(RC)，最后得到基于区域对比度的显著图。Hornung等人(“Contrastbasedfilteringforsalientregion”)于2012年提出了一种基于滤波来提高计算效率的方法，显著图的计算元素是SLIC超像素分割后的每一个超像素块，综合颜色对比度和颜色分布方差来计算显著图。郭迎春等人(“基于Local特征和Regional特征的图像显著性检测”)于2013年利用图像在多个尺度下计算得到的子块的局部特征和区域特征进行自然图像的显著性检测。张旭东等人(“结合区域协方差分析的图像显著性检测”)于2016年提出了一种基于协方差矩阵的检测方法，但部分显著目标不完整。
技术实现思路
本专利技术的目的是针对现有技术的不足，提出一种利用超像素分割与聚类分割结合计算图像颜色对比度和颜色空间分布性的显著性检测方法。该方法能够有效地抑制背景区域的显著性，检测出图像准确的显著性区域，特别是一些以往仅以颜色为特征的检测方法只能检测出错误区域的特殊图像，该方法可以根据颜色空间分布信息改正偶然错误的颜色对比图而得到最终准确的显著图。本专利技术的具体步骤如下：步骤1、将输入图像进行平滑处理，得到平滑图像。步骤2、利用SLIC超像素分割算法将平滑图像分割成超像素图，并计算每个超像素的平均颜色和平均位置：其中，Ri表示第i个超像素，像素Ii∈Ri，为像素Ii的颜色向量，为像素Ii的位置向量，ci为Ri中所有像素的平均颜色向量，pi为Ri中所有像素的平均位置向量，|Ri|表示Ri中像素的个数。步骤3、利用中心-周围原则计算超像素图中每个超像素的颜色对比值Fi，得到颜色对比图。其中，C(ci,cj)＝||ci-cj||表示ci与cj的欧氏距离，Wp(pi,pj)是调节对比值的空间权重，P(pi,pj)＝||pi-pj||表示pi与pj的欧氏距离。1/Zi是使得的归一化因子，σp取值0.5，exp为指数运算，N＝|Ri|-1，cj为Rj中所有像素的平均颜色向量，pj为Rj中所有像素的平均位置向量，Rj表示第j个超像素。步骤4、利用K-Means聚类算法把平滑图像按照颜色聚类分割为M个类，M≤10，得到聚类图，类又称为颜色分量。按下式计算每个颜色分量的平均颜色和平均位置。其中，Gi表示第i个颜色分量，像素Pi∈Gi，为像素Pi的颜色向量，颜色向量采用l分量、a分量和b分量表达，为像素Pi的位置向量；cgi为颜色分量Gi的平均颜色向量，即颜色分量Gi在颜色上的聚类中心；pgi为颜色分量Gi的平均位置向量，即颜色分量Gi在空间上的聚类中心，|Gi|表示颜色分量Gi中像素的个数。步骤5、计算聚类图中的类间空间方差、类内空间方差以及类内颜色方差。其中，Viin和Viout分别表示颜色分量Gi的类内空间方差和类间空间方差，表示颜色分量Gi的类内颜色方差，表示颜色分量Gj在空间上的聚类中心。步骤6、将步骤5求得的类间空间方差、类内空间方差以及类内颜色方差非线性组合成初步的颜色空间分布值。采用高斯权值为类内颜色方差分配权重，即取5。步骤7、由聚类图得出每个类初步的颜色空间分布值之后，映射到超像素图上进行优化，得到优化的颜色空间分布值Di′，并进行归一化处理，得到优化的颜色空间分布图：其中，Ui是指超像素Ri的邻接超像素个数；Ki和Kj分别是超像素Ri和超像素Rj的初步的颜色空间分布值，vi指超像素Ri中每个像素点初步的颜色空间分布值。步骤8、融合颜色对比图和优化的颜色空间分布图，得到显著图。Si＝Fi·Di′(11)由于Fi和Di′都与显著图成正比，所以，若某一处超像素的灰度值为零，从公式(11)得出最后的显著图中相应的Si也为零。C(ci,cj)表达了超像素Ri与超像素Rj的颜色差，颜色差计算时只取a分量和b分量两个通道的差异。本专利技术的有益效果：本专利技术得到的显著图结合了颜色空间分布性，特别地对于颜色高对比度区域并非显著区域的图像，能够高效地检测出准确的显著性目标区域，同时，降低了背景区域的显著性。附图说明图1(a)、1(b)、1(c)分别为本文档来自技高网...

【技术保护点】
融合颜色对比图和颜色空间分布图的图像显著性检测方法，其特征在于：该方法的具体步骤是：步骤1、将输入图像进行平滑处理，得到平滑图像；步骤2、利用SLIC超像素分割算法将平滑图像分割成超像素图，并计算每个超像素的平均颜色和平均位置：

【技术特征摘要】
1.融合颜色对比图和颜色空间分布图的图像显著性检测方法，其特征在于：该方法的具体步骤是：步骤1、将输入图像进行平滑处理，得到平滑图像；步骤2、利用SLIC超像素分割算法将平滑图像分割成超像素图，并计算每个超像素的平均颜色和平均位置：其中，Ri表示第i个超像素，像素Ii∈Ri，为像素Ii的颜色向量，为像素Ii的位置向量，ci为Ri中所有像素的平均颜色向量，pi为Ri中所有像素的平均位置向量，|Ri|表示Ri中像素的个数；步骤3、利用中心-周围原则计算超像素图中每个超像素的颜色对比值Fi，得到颜色对比图；其中，C(ci,cj)＝||ci-cj||表示ci与cj的欧氏距离，Wp(pi,pj)是调节对比值的空间权重，P(pi,pj)＝||pi-pj||表示pi与pj的欧氏距离；1/Zi是使得的归一化因子，σp取值0.5，exp为指数运算，N＝|Ri|-1，cj为Rj中所有像素的平均颜色向量，pj为Rj中所有像素的平均位置向量，Rj表示第j个超像素；步骤4、利用K-Means聚类算法把平滑图像按照颜色聚类分割为M个类，M≤10，得到聚类图，类又称为颜色分量；按下式计算每个颜色分量的平均颜色和平均位置；其中，Gi表示第i个颜色分量，像素Pi∈Gi，为像素Pi的颜色向量，颜色向量采用l分量、a分量和b分量表达，为像素Pi的位置向量；cgi为颜色分量Gi的平均颜色向量，即颜色分量Gi在颜色上的聚类中心；pgi为颜色分量Gi的平均位置向量，即颜色分量Gi在空间上的聚类中心，|Gi|表示颜色分量Gi中像素的...

【专利技术属性】
技术研发人员：许金兰，崔玲玲，徐岗，吴卿，
申请(专利权)人：杭州电子科技大学，
类型：发明
国别省市：浙江,33