一种深度形状先验提取方法技术

一种深度形状先验提取方法，所述深度形状先验提取方法包括以下步骤：将具有较大RGB显著性值的K个超像素区域选为根种子点，建立起深度特性和显著性之间关系；基于深度平滑性和一致性约束，确定每个根种子点的子节点集合，以此来描述深度形状属性；考虑前后两次循环传播中的相关超像素节点的深度一致性、和当前循环超像素与根种子点之间的深度一致性，将最终的DSP值定义为两种情况深度一致性的最大值；多个根种子点生成的DSP图融合后得到最终的DSP结果。本发明专利技术通过对深度图像数据的深入分析，充分挖掘深度图的形状先验信息，为RGBD显著性检测提供有效深度信息。

【技术实现步骤摘要】
一种深度形状先验提取方法
本专利技术涉及图像处理、立体视觉
，尤其涉及一种深度形状先验提取方法。
技术介绍
人类视觉感知系统可以自动感知场景信息，定位重要目标和区域。实际上，人类在对场景进行感知时，除了获取颜色、形状等外貌信息外，还可以感知场景的深度信息，即景深。随着成像设备的发展，场景深度数据的获取方式变得更加快捷、便利。这为针对RGBD数据的相关研究工作奠定了数据基础。作为彩色数据的补充，深度数据可以提供许多有效信息，如位置关系、目标形状等，进而提升任务性能。目前针对RGBD数据已开展了广泛的研究，例如：RGBD目标识别、RGBD场景分割、RGBD显著性检测等。作为计算机视觉领域的一项重要预处理技术，视觉显著性检测已广泛应用于检测、编码、增强、压缩等领域。Cong等人提出了一种深度置信测度的深度特性描述方法。Ju等人提出了一种各向异性中心-周围差异测度描述场景深度信息。Feng等人利用局部背景环绕特征对深度图像进行描述。专利技术人在实现本专利技术的过程中，发现现有技术中至少存在以下缺点和不足：现有技术中的方法并未建立显著性目标与其深度分布的对应关系；现有方法通常将深度图作为额外的一种特征，而未捕获深度图的形状等有用信息。
技术实现思路
本专利技术提供了一种深度形状先验提取方法，本专利技术通过对深度图像数据的深入分析，充分挖掘深度图的形状先验信息，为RGBD显著性检测提供有效深度信息，详见下文描述：一种深度形状先验提取方法，所述深度形状先验提取方法包括以下步骤：1)将具有较大RGB显著性值的K个超像素区域选为根种子点，建立起深度特性和显著性之间关系；2)基于深度平滑性和一致性约束，确定每个根种子点的子节点集合，以此来描述深度形状属性；3)考虑前后两次循环传播中的相关超像素节点的深度一致性、和当前循环超像素与根种子点之间的深度一致性，将最终的DSP值定义为两种情况深度一致性的最大值；4)多个根种子点生成的DSP图融合后得到最终的DSP结果。在步骤1)之前，所述深度形状先验提取方法还包括：通过超像素分割算法对彩色图像进行分割，得到N个超像素区域，通过RGB显著性检测算法得到每个超像素区域的RGB显著性结果。进一步地，所述深度平滑性具体为：邻域超像素区域和第l-1次循环产生的子节点的深度差异小于特定的阈值。进一步地，所述深度一致性约束具体为：根种子点与当前循环的邻域超像素之间的深度差值小于某一特定阈值。其中，所述最终的DSP值具体为：DSPk(rcp)＝1-min(|dcp,l-dc,l-1|,|dcp,l-drk|)其中，DSPk(rcp)表示从第k个根种子点出发，第l次循环的子节点rcp的DSP值，dcp,l表示l次循环的子节点rcp的深度值，dc,l-1表示l-1次循环的子节点集合的平均深度值，drk表示根种子节点的深度值，min为最小化函数，|·|为绝对值函数。进一步地，在步骤3)之后、步骤4)之前，所述深度形状先验提取方法还包括：计算当前循环扩散过程的DSP值，进行下一次循环扩散，直到不存在满足深度约束条件的邻域超像素为止。本专利技术提供的技术方案的有益效果是：1、本专利技术深入挖掘了深度图的形状信息，提出了一种深度形状先验提取方法，该先验有效描述了深度图中显著性目标的形状信息；2、本专利技术抑制了背景干扰，获得了显著性目标的准确表达，为显著性检测任务提供了良好的深度表达信息。附图说明图1为一种深度形状先验提取方法的流程图；图2为本专利技术得到的深度形状先验图。具体实施方式为使本专利技术的目的、技术方案和优点更加清楚，下面对本专利技术实施方式作进一步地详细描述。RGBD数据除了可以提供丰富的颜色信息外，还引入了立体感知的深度信息，极大地丰富了数据类型，包含了更多有用的信息。但是，如何充分挖掘深度图像中的有效信息成为相关研究的重点和难点。经观察发现，质量较好的深度图可以提供良好的目标形状先验和边界信息，且目标内部区域的深度值具有较高的一致性。为此，本专利技术实施例提供了一种深度形状先验提取方法。实施例1一种深度形状先验提取方法，参见图1，该深度形状先验提取方法包括以下步骤：101：将具有较大RGB显著性值的K个超像素区域选为根种子点，建立起深度特性和显著性之间关系；102：基于深度平滑性和一致性约束，确定每个根种子点的子节点集合，以此来描述深度形状属性；103：考虑前后两次循环传播中的相关超像素节点的深度一致性、和当前循环超像素与根种子点之间的深度一致性，将最终的DSP值定义为两种情况深度一致性的最大值；104：多个根种子点生成的DSP图融合后得到最终的DSP结果。其中，在步骤101之前，该深度形状先验提取方法还包括：通过超像素分割算法对彩色图像进行分割，得到N个超像素区域，通过RGB显著性检测算法得到每个超像素区域的RGB显著性结果。进一步地，步骤102中的深度平滑性具体为：邻域超像素区域和第l-1次循环产生的子节点的深度差异小于特定的阈值。进一步地，步骤102中的深度一致性约束具体为：根种子点与当前循环的邻域超像素之间的深度差值小于某一特定阈值。进一步地，在步骤103之后、步骤104之前，该深度形状先验提取方法还包括：计算当前循环扩散过程的DSP值，进行下一次循环扩散，直到不存在满足深度约束条件的邻域超像素为止。综上所述，本专利技术实施例通过上述步骤101-步骤104深入挖掘了深度图的形状信息，有效描述了深度图中显著性目标的形状信息；抑制了背景干扰，获得了显著性目标的准确表达，为显著性检测任务提供了良好的深度表达信息。实施例2下面结合具体的计算公式、实例对实施例1中的方案进行进一步地介绍，详见下文描述：201：图像预处理；设RGB彩色图像记为I，对应的深度图记为D。首先，利用SLIC(简单线性迭代聚类)超像素分割算法对彩色图像进行分割，得到N个超像素区域，记为其中，rm为超像素区域。然后，选择一种现有的RGB显著性检测算法作为基础算法，如BSCA算法(基于元胞自动机的显著性检测算法)，得到每个超像素区域的RGB显著性结果，记超像素区域rm的RGB显著性值为Si(rm)。经观察发现，深度图通常具有以下特性：1)与背景区域相比，显著性对象往往具有更大的深度值；2)高质量深度图中的对象区域往往具有锐利的边界和明显的形状；3)目标内部区域的深度值往往比较平滑、均匀。受这些观察启发，本专利技术实施例提出了一种深度信息描述子——深度形状先验(depthshapeprior，DSP)。该描述子通过深度传播和区域增长过程捕获深度图的形状属性，进而获得深度信息的良好表达。202：确定根种子点；对于图像I，将具有较大RGB显著性值的K个超像素区域选为根种子点，公式如下：其中，sort为降序排列函数，S(rm)表示超像素区域rm的RGB显著性值，rrk表示选择出的根种子点，K为根种子点个数。可以看出，本专利技术实施例通过选择显著的超像素区域作为传播过程的根种子点，建立起了深度特性和显著性之间关系。此外，本专利技术实施例将每个超像素区域的DSP值都初始化为0。203：基于深度平滑性和一致性约束，确定每个根种子点的子节点集合，以此来描述深度形状属性；在第l次循环中，如果第l-1次循环产生的子节点的直接邻域满足如下两个约束条件，则将其看作是第l次循环的子节点：1)深度本文档来自技高网...

【技术保护点】
一种深度形状先验提取方法，其特征在于，所述深度形状先验提取方法包括以下步骤：1)将具有较大RGB显著性值的K个超像素区域选为根种子点，建立起深度特性和显著性之间关系；2)基于深度平滑性和一致性约束，确定每个根种子点的子节点集合，以此来描述深度形状属性；3)考虑前后两次循环传播中的相关超像素节点的深度一致性、和当前循环超像素与根种子点之间的深度一致性，将最终的DSP值定义为两种情况深度一致性的最大值；4)多个根种子点生成的DSP图融合后得到最终的DSP结果。

【技术特征摘要】
1.一种深度形状先验提取方法，其特征在于，所述深度形状先验提取方法包括以下步骤：1)将具有较大RGB显著性值的K个超像素区域选为根种子点，建立起深度特性和显著性之间关系；2)基于深度平滑性和一致性约束，确定每个根种子点的子节点集合，以此来描述深度形状属性；3)考虑前后两次循环传播中的相关超像素节点的深度一致性、和当前循环超像素与根种子点之间的深度一致性，将最终的DSP值定义为两种情况深度一致性的最大值；4)多个根种子点生成的DSP图融合后得到最终的DSP结果。2.根据权利要求1所述的一种深度形状先验提取方法，其特征在于，在步骤1)之前，所述深度形状先验提取方法还包括：通过超像素分割算法对彩色图像进行分割，得到N个超像素区域，通过RGB显著性检测算法得到每个超像素区域的RGB显著性结果。3.根据权利要求1所述的一种深度形状先验提取方法，其特征在于，所述深度平滑性具体为：邻域超像素区域和第l-1次循环产生的子节点的...

【专利技术属性】
技术研发人员：雷建军，丛润民，侯春萍，李欣欣，韩梦芯，罗晓维，
申请(专利权)人：天津大学，
类型：发明
国别省市：天津,12