多分辨率图像金字塔的生成制造技术

描述了用于生成多分辨率图像金字塔的系统和方法的各实施例。该方法可包括获得作为被定义对象的粗略图像和被定义对象的精细图像来捕捉的图像。可对精细图像进行下采样以创建临时图像。进一步的操作是对临时图像应用结构转移操作以便转移来自粗略图像的色彩细节。结构转移发生，但同时保留来自临时图像的结构细节。可在临时图像与精细图像之间应用混合操作，以便为精细图像与粗略图像之间的多分辨率图像金字塔中的至少一个中间层构建中间图像。

【技术实现步骤摘要】
【国外来华专利技术】多分辨率图像金字塔的生成
技术介绍
在计算机图形和GIS (地理信息系统)社区中，已经广泛地研究了縫合与融合图像集合以形成无缝地图或全景图的主題。这些成像技术已经用于组装因特网服务(像Keyhole、TerraServer> Bing 地图、Google 地图和Yahoo 地图)上可用的大型数据集。多分辨率数据集通常包含若干不同比例的图像源。例如，可以以粗略分辨率来提供卫星图像，而以较精细的分辨率来使用航摄图像。在这些地图中缩放可能会展现有抖动的过渡。由于光谱响应、季节变化、光照和阴影以及定制图像处理中的差异，从中提取图像的数据源通常在外观上显著的变化。具体而言，在多分辨率图像金字塔内放大或缩小通常导致外观上的突变(即临时的“弹出”)。另外，可能在静态立体图中观察到空间的不连续，因为这些视图同时访问若干图像金字塔层
技术实现思路
提供本
技术实现思路
以便以简化的形式介绍将在以下详细描述中进一步描述的ー些概念。本
技术实现思路
并不g在标识出所要求保护的主题的关键特征或必要特征，也不g在用于限定所要求保护的主题的范围。尽管在上文描述了现有技术的某些缺点，但所要求保护的主题不限于解决现有技术的所描述缺点中的任何缺点或全部缺点的实现。描述了用于生成多分辨率图像金字塔的系统和方法的各个实施例。该方法可包括获得作为被定义对象的粗略图像和被定义对象的精细图像来捕捉的图像。可对精细图像进行下采样以创建临时图像。进ー步的操作为对临时图像应用结构转移操作以转移来自粗略图像的色彩细节。结构转移发生，但同时保留来自临时图像的结构细节。可在临时图像与精细图像之间应用混合操作，以在精细图像与粗略图像之间为多分辨率图像金字塔中的至少ー个中间层构建中间图像。附图说明图I示出具有多分辨率上采样图像的多分辨率图像金字塔的一个实施例。图2是示出一个实施例中的用于生成多分辨率图像金字塔的方法的概览的流程图。图3是示出用于创建多分辨率图像金字塔的方法的一个实施例的框图。图4是可用于窗ロ转移计算的Z-分数和排序属性的一个实施例的图示。图5是示出用于生成图像的方法的一个实施例的流程图，该图像包括来自精细图像的图像结构细节以及来自粗略图像的色彩。图6是示出用于经修剪的拉普拉斯(Laplacian)混合的过程的一个实施例的图表。图7示出用于经修剪的拉普拉斯混合的高效混合方法的过程的一个实施例。图8是示出生成在跨多个查看比例的视觉过渡中使用的多分辨率图像金字塔的高效操作的实施例的流程图。图9是示出可用于生成在跨多个查看比例的视觉过渡中使用的多分辨率图像金字塔的各个模块的实施例的框图。具体实施例方式现在将參考附图中所示出的示例性实施例，并使用特定语言来对其进行描述。不过，需要理解的是，并无意由此作出本专利技术范围上的限制。相关
的且拥有本公开内容的技术人员将想到的对此处所示出的特征的更改和进ー步的修改以及对本文所示的各实施例的其他应用，都应该被视为在本专利技术的范围内。能够创建对不同比例的不同数据源进行组合的视觉平滑图像。这种图像金字塔用于在计算机生成的图像环境中的较低分辨率图像与较高分辨率图像之间过渡。这种计算机生成的图像环境的示例可包括仿真、游戏、地图、医学图像、以及期望粗略分辨率图像与精细分辨率图像之间的平滑过渡的其他环境。 在各层的子集处存在图像金字塔的输入图像，并且该图像可能已经是使用现有的縫合技术在空间上被縫合到一起。虽然创建图像金字塔的问题可能看起来简单，但是若干直接的方法存在缺点。一种简单的想法是一直对精细图像进行下采样直到金字塔的最粗略层，重写任何较粗略的图像内容。下采样或上采样是降低对根据原始图形图像创建的图像的采样频率的过程。然而，精细比例的图像通常被稀疏地定义，并且所得的较粗略层可能具有不统ー的外观。相反，期望保留粗略比例图像的空间一致性。另ー种可能的方法是将精细比例的图像修改成具有与粗略比例的内容相同的色彩外观。然而，精细图像的色彩直方图通常更丰富，并且可能更偏好精细图像的色彩直方图。具体而言，在外观上图像边缘处的差异以及图像金字塔各层之间的差异在静态立体图中会是明显的。类似地，通过对稀疏精细图像进行下采样来替换粗略金字塔层的方案可能导致较粗略层处的拼凑外观。为了解决这些问题，如图I所示，本技术可根据若干比例的经缝合的图像来创建具有多分辨率的经上采样的图像的图像金字塔100，该图像金字塔提供缩放发生时的更平滑的视觉过渡。本技术提供了改善图像间的过渡的技木。被称为结构转换的ー种技术是将一个图像的细节与另ー个图像的局部外观进行组合的非线形操作符。该操作可用于在保留色彩一致性的同时将细节从精细图像130注入到粗略图像110中。来自结构转移操作的中间分辨率图像120中提供的经改进的结构相似度显著地减少了层间的重影产物。第二种技术可被称为经修剪的拉普拉斯混合，并且该混合技术可以是最小化创建中间层时的模糊的高效构造。这种混合考虑了金字塔内全部层间图像差异的总和。该过程可同时满足多分辨率和空间连续性。因此，图像金字塔的相邻层之间的视觉差异可被最小化。另外，可以保留粗略和精细图像二者的色彩特性。通常使用对应像素的均方误差(MSE)来測量两个图像间的视觉差异。虽然这个简单的点态度量带来便利的线性系统，但它不能准确地捕捉人类视觉系统的知觉特性。相反，强调结构相似度(SSIM)的度量能够更加有效。具体而言，単独最小化MSE导致具有严重重影产物的图像金字塔。简单地最小化MSE的一个问题是由于重合失调、视差、或图像获取和处理中的许多其他无法避免的因素，粗略和精细图像具有结构细节上的差异。明确地考虑结构相似度有助于克服重影。最大化结构相似度通常是非线形的问题，并且因此要直接解决则代价昂贵。为了得到高效的解决方案，该问题可被划分成两部分。第一，结构转移操作可用于最大化结构兼容性。该操作可将粗略图像修改为在保留其原始局部色彩特性的同时继承精细图像的细节。第二，一旦结构上兼容的图像已被创建，则可使用MSE度量来最小化金字塔内的全部层间图像差异的总和。该差异函数可被明智地定义以避免信号模糊。虽然最小化MSE是线性问题，但对大型图像金字塔中全部像素的全局解决方案依然代价昂贵。可使用具有经修剪的拉普拉斯混合的高效构造来寻找ー个好的近似解决方案。图2是示出用于生成多分辨率图像金字塔的方法的实施例的高级概览的流程图。该方法可包括获得作为被定义对象的粗略图像来捕捉的图像的操作，如在框210。粗略图像的一个示例是某个地理区域的卫星图像(例如，Landsat图像)或被应用到3-D几何对象的粗略纹理。图像也可作为被定义对象的精细图像被捕捉，如在框220。粗略图像的一个示例 是作为粗略图像的同一地理区域的航摄图像或被应用到3-D几何对象的精细纹理。可从计算机可读存储介质或计算机存储器中获得被定义对象的粗略图像和精细图像。随后可对精细图像进行下采样以创建临时图像，如在框230。结构转移操作随后可被应用到该临时图像，以在保留来自临时图像的结构细节的同时转移来自粗略图像的色彩细节，如在框240。可在临时图像与精细图像之间应用混合操作，以在精细图像与粗略图像之间为多分辨率图像金字塔中的至少ー个中间层构建中间图像，如在框250。向临时图像应用结构转移操作和应用混合操作的操作可由计算机处理器在服本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】2010.04.05 US 12/754,5261.一种用于生成多分辨率图像金字塔的方法，包括获得作为被定义对象的粗略图像来捕捉的图像；获得作为所述被定义对象的精细图像来捕捉的另ー个图像；对所述精细图像进行下采样以创建临时图像；对所述临时图像应用结构转移操作，以在保留来自所述临时图像的结构细节的同时转移来自所述粗略图像的色彩细节；以及在所述临时图像与所述精细图像之间应用混合操作，以在所述精细图像与所述粗略图像之间为所述多分辨率图像金字塔中的至少ー个中间层构建中间图像。2.如权利要求I所述的方法，其特征在于，还包括应用ー混合操作，所述混合操作是经修剪的拉普拉斯混合。3.如权利要求I所述的方法，其特征在于，还包括应用ー混合操作，所述混合操作将来自所述精细图像的拉普拉斯金字塔与根据所述临时图像生成的拉普拉斯图像相混合。4.如权利要求I所述的方法，其特征在于，还包括根据所述精细图像形成具有多个经下采样的图像的精细拉普拉斯图像金字塔；根据所述粗略图像构建具有多个经下采样的图像的粗略拉普拉斯图像金字塔；通过形成第三拉普拉斯金字塔来形成每个中间图像，所述第三拉普拉斯金字塔通过从根层到所述粗略图像层混合所述粗略拉普拉斯金字塔与精细拉普拉斯金字塔的对应层来形成。5.如权利要求I所述的方法，其特征在于，还包括从计算机可读存储介质检索所述被定义对象的所述粗略图像和精细图像。6.如权利要求2所述的方法，...

【专利技术属性】
技术研发人员：H·霍普，C·韩，M·尤特纳达勒，
申请(专利权)人：微软公司，
类型：
国别省市：