一种RGBD数据深度迁移的单幅图像2D转3D方法技术

技术编号:8537250 阅读:633 留言:0更新日期:2013-04-04 22:21
本发明专利技术的一种RGBD数据深度迁移的单幅图像2D转3D方法,通过从互联网的RGBD数据库中,检索原图像的K个近邻图像及其对应深度,并计算待匹配图像的匹配代价;再通过片匹配建立原图像与近邻图像之间的稠密对应关系;再根据稠密对应关系将原始2D图像的K个近邻图像的对应深度迁移到原始2D图像平面上;从K个迁移的深度图中选取一个最佳的深度作为其初始估计深度;为进一步改进深度图估计质量并抑制噪声,对融合后的深度图进行后处理;最后根据原始2D图像的视觉显著度对深度图进行非线性处理,合成3D图像。其优点为场景适用性强,深度估计质量高,计算简单快速。

【技术实现步骤摘要】

本专利技术涉及2D转3D技术,尤其涉及一种单幅图像2D转3D方法,特别指一种RGBD数据深度迁移的单幅图像2D转3D方法
技术介绍
3D视频是传统2D视频的扩展,通过增加深度信息,使用户体验到视频内容的立体感和临场感。3D视频作为下一代视频的发展方向,涉及3D内容制作、传输、存储、播放和显示设备等技术,对于发展国民经济具有重要的现实意义。3D内容贫乏是制约当前3D视频发展的主要因素之一,想要创建一批拥有较高品质和 符合3D展示媒介需求的3D节目依然有较大难度。单幅图像2D转3D方法能够在较短时间内以较低的成本将现有海量2D视频资源转换为可立体显示的3D视频,既能缓解当前3D内容贫乏的状况,又能解决利用3D拍摄设备直接制作3D内容的高成本和操作不便性。2D转3D方法的核心任务是从2D图像中提取景物的深度信息。受人类视觉单目深度推理的启发,研究人员提出了多种利用视觉线索进行单目图像深度估计的理论和方法,例如透视、纹理、明暗度、聚焦度等。基于透视的单目图像深度估计原理是平行线经透视成像后将交于一点,称为灭点(vanishing point),对应的线称为灭线(vanishing line),根据灭线相交的方向对整幅图像进行深度分配。图像上纹理基元的几何形态跟摄像机和纹理表面的位置关系有关,因而也可根据纹理透视缩放(与表面方向有关)和密度变化效应(与观察者和纹理基元的距离有关)进行深度估计。在朗伯表面的假设前提下,在光源照明下物体表面灰度随着表面法线变化,因而可通过分析物体表面的明暗度变化估计出物体的深度。聚焦深度提取考虑到低深度场景中只有处在离镜头特定位置处才能被聚焦,其他位置都会产生不同程度的模糊,且模糊程度与所处的距离有关。上述方法的缺陷是通用性差,只有场景包含对应的深度线索时才可能得到可靠的深度估计结果;且这些方法只能得到相对深度,难以获取精确的深度信息。因而为推动3D视频的发展,迫切需要设计一种具有场景普适性的高质量2D转3D方法。随着Kinect的流行和推广,互联网上已聚集海量RGBD数据。另一方面,基于内容的图像检索技术已成熟。经验告诉我们,相似的场景具有相似的深度。因而根据场景匹配,从海量RGBD数据库中查询输入场景的深度成为可能。
技术实现思路
本专利技术所要解决的技术问题是针对现有技术的现状,提供场景适用性强,深度估计质量高,计算简单快速的一种RGBD数据深度迁移的单幅图像2D转3D方法。本专利技术解决上述技术问题所采用的技术方案为 一种RGBD数据深度迁移的单幅图像2D转3D方法,包括以下 步骤一、全局描述符的计算通过计算得出图像的全局描述符;步骤二、检索近邻图像根据所述的全局描述符在互联网RGBD数据库中检索出候选图像,并计算其匹配代价,根据计算得出的匹配代价从小到大得到原始2D图像的K个近邻图像及其对应深度,其中K为正整数; 步骤三、建立稠密对应关系通过片匹配建立原始2D图像与K个近邻图像之间的稠密对应关系; 步骤四、深度迁移根据稠密对应关系将原始2D图像的K个近邻图像的对应深度迁移到原始2D图像平面上; 步骤五、深度图融合对于原始2D图像的每个像素点,从K个迁移的深度图中选取一个最佳的深度作为其初始估计深度; 步骤六、深度图后处理为进一步改进深度图估计质量并抑制噪声,对融合后的深度图进行后处理; 步骤七、3D图像的合成根据原始2D图像的视觉显著度对深度图进行非线性处理,合成3D图像。优化的技术措施还包括 上述的全局描述符的计算采用GIST特征。上述的匹配代价的计算公式为本文档来自技高网
...

【技术保护点】
一种RGBD数据深度迁移的单幅图像2D转3D方法,其特征是:包括以下步骤:步骤一、全局描述符的计算:通过计算得出图像的全局描述符;步骤二、检索近邻图像:根据所述的全局描述符在互联网RGBD数据库中检索出候选图像,并计算其匹配代价,根据计算得出的匹配代价从小到大得到原始2D图像的K个近邻图像及其对应深度,其中K为正整数;步骤三、建立稠密对应关系:通过片匹配建立原始2D图像与K个近邻图像之间的稠密对应关系;步骤四、深度迁移:根据所述的稠密对应关系将原始2D图像的K个近邻图像的对应深度迁移到原始2D图像平面上;步骤五、深度图融合:对于原始2D图像的每个像素点,从K个迁移的深度图中选取一个最佳的深度作为其初始估计深度;步骤六、深度图后处理:为进一步改进深度图估计质量并抑制噪声,对融合后的深度图进行后处理;步骤七、3D图像的合成:根据原始2D图像的视觉显著度对深度图进行非线性处理,合成3D图像。

【技术特征摘要】
1.一种RGBD数据深度迁移的单幅图像2D转3D方法,其特征是包括以下步骤步骤一、全局描述符的计算通过计算得出图像的全局描述符;步骤二、检索近邻图像根据所述的全局描述符在互联网RGBD数据库中检索出候选图像,并计算其匹配代价,根据计算得出的匹配代价从小到大得到原始2D图像的K个近邻图像及其对应深度,其中K为正整数;步骤三、建立稠密对应关系通过片匹配建立原始2D图像与K个近邻图像之间的稠密对应关系;步骤四、深度迁移根据所述的稠密对应关系将原始2D图像的K个近邻图像的对应深度迁移到原始2D图像平面上;步骤五、深度图融合对于原始2D图像的每个像素点,从K个迁移的深度图中选取一个最佳的深度作为其初始估计深度;步骤六、深度图后处理为进一步改进深度图估计质量并抑制噪声,对融合后的深度图进行后处理;步骤七、3D图像的合成根据原始2D图像的视觉显著度对深度图进行非线性处理,合成3D图像。2.根据权利要求1所述的一种RGBD数据深度迁移的单幅图像2D转3D方法,其特征是所述的全局描述符的计算采用GIST特征...

【专利技术属性】
技术研发人员:袁红星吴少群朱仁祥诸葛霞
申请(专利权)人:宁波工程学院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1