用于增强现实表示的二维图像获取制造技术

总体上公开了获取用于增强现实表示的二维图像的技术和实现。

【技术实现步骤摘要】
【国外来华专利技术】用于增强现实表示的二维图像获取
技术介绍
除非本文另有指示，否则该部分中描述的方法不是针对本申请中的权利要求的现有技术，并且不能由于包括在该部分中而被认为是现有技术。一些图像处理服务可以将多个图像合并成虚拟旅游。这些虚拟旅游可以尝试模拟尽可能多的三维(3D)体验。此外，其它系统可以将一系列二维(2D)图像转换成3D。生成的3D模型或3D合成的质量可能取决于照片的定位和分辨率。例如，当使用照片到3D转换时，可能会去掉(wind up)缺乏足够的共享上下文或边缘的丢失表面和/或图像的一些组合，以使得能够将照片集成到这种3D模型中。由于增强现实表示(例如，3D图像)可以用于越来越多的目的，所以一般的家庭用户可能希望能够拍照对象和场所的照片，并且生成这些照片的良好质量的3D模型。
技术实现思路
本文描述的一些示例性方法、设备和系统可以涉及获取用于增强现实表示的二维图像。与获取用于增强现实表示的二维图像有关的一些示例性方法、设备和系统可以在电子图像获取装置中实现。一些方法可以包括由电子图像获取装置至少部分地基于对对象的一个或更多个二维图像的分析来确定所述对象的增强现实表示。这种增强现实表示可以包括多个表面假设。可以确定与各个表面假设相关联的一个或更多个可靠性值。可以将所述一个或更多个可靠性值与一个或更多个阈值可靠性标准进行比较，以从所述多个表面假设识别一个或更多个感兴趣表面区域。可以经由所述电子图像获取装置的显示器来显示与获取所述对象的一个或更多个附加的二维图像有关的引导。这种引导可以至少部分地基于所识别的感兴趣表面区域。与获取用于增强现实表示的二维图像有关的一些示例性方法、设备和系统可以在电子图像获取装置中实现。这种电子图像获取装置可以包括光学传感器和控制单元。这种光学传感器可以被配置为获取对象的二维图像并且获取实时视频数据。这种控制单元可以被配置为至少部分地基于对所述对象的一个或更多个二维图像的分析来确定所述对象的增强现实表示。这种增强现实表示可以包括多个表面假设。可以由所述控制单元来确定与各个表面假设相关联的一个或更多个可靠性值。可以将所述一个或更多个可靠性值与一个或更多个阈值可靠性标准进行比较，以从所述多个表面假设识别一个或更多个感兴趣表面区域。可以经由所述电子图像获取装置的显示器来确定与获取所述对象的一个或更多个附加的二维图像有关的引导。这种引导可以至少部分地基于所识别的感兴趣表面区域。前面的概述仅是例示性的并且不旨在以任何方式进行限制。除了上述的例示性方面、实施方式和特征之外，通过参照附图和下面的详细描述，其它方面、实施方式和特征将变得明显。【附图说明】在本说明书的结论部分中特别地指出并且明确地要求保护主题。根据结合附图进行的以下描述和所附权利要求书，本公开的以上和其它特征将变得更充分地显而易见。要理解的是，这些附图仅描述了根据本公开的多个实施方式，因此不能被认为是对本公开的范围的限制，将通过使用附图来利用附加的特征和细节描述本公开。附图中:图1例示根据本公开的至少一些实施方式布置的示例性电子图像获取装置；图2例示根据本公开的至少一些实施方式布置的获取对象的一个或更多个二维图像的示例性电子图像获取装置；图3例示根据本公开的至少一些实施方式布置的获取用于增强现实表示的二维图像的示例性处理；图4例示根据本公开的至少一些实施方式布置的获取用于增强现实表示的二维图像的另一个示例性处理；图5例示根据本公开的至少一些实施方式布置的包括多个表面假设的示例性增强现实表示；图6例示根据本公开的至少一些实施方式布置的与增强现实表示相关联的示例性视角锥；图7例示根据本公开的至少一些实施方式布置的与多个表面假设中的感兴趣表面区域相关联的示例性视角锥；图8例示根据本公开的至少一些实施方式布置的用于基于视角锥来获得关于感兴趣表面区域的数据的示例性选择；图9例示根据本公开的至少一些实施方式布置的示例性屏幕快照；图10是根据本公开的至少一些实施方式布置的示例性计算机程序产品的例示；以及图11是根据本公开的至少一些实施方式布置的计算装置的例示性实施方式的框图。【具体实施方式】以下描述连同具体细节一起阐述各种示例，以提供对要求保护的主题的深入理解。然而，本领域技术人员将要理解的是，要求保护的主题也可以在没有本文公开的一些或更多具体细节的情况下实践。此外，在一些情况下，为了避免对要求保护的主题的不必要混淆，没有详细描述公知的方法、处理、系统、部件和/或电路。在下面的详细说明中，参照附图，这些附图形成了本说明书的一部分。在附图中，除非上下文另行说明，否则相似的符号通常标识相似的部件。在具体说明书、附图和权利要求中描述的例示性实施方式不意味着为限制。在不脱离本文表现的主题的精神或范围的情况下，可利用其它实施方式，并且可以进行其它改变。容易理解的是，如本文总体描述的和附图例示的本公开的各个方面，可以按照各种不同的配置来布置、替换、组合和设计，本公开的各个方面全部被明确设想并构成本公开的一部分。除其它因素外，本公开被描绘为与对用于增强现实表示的二维图像进行获取有关的方法、设备和系统。以下针对计算拍摄的有利视角以便于构建增强现实表示(例如，3D模型)并且在用户的电子图像获取装置上向用户显示这些视角，描述了方法、设备和系统。例如，智能电话型电子图像获取装置可以显示优选的有利位置，该优选的有利位置示出建议用户进行拍摄的目标视图。这种优选的有利位置可被计算，以针对增强现实表示的具有低质量数据的部分或者增强现实表示的不能直接观看但是理论上存在的部分来提供附加的图像数据。图1例示根据本公开的至少一些实施方式布置的示例性电子图像获取装置100。电子图像获取装置100可用于执行下面结合图3和/或图4讨论的各种功能中的一些或全部。电子图像获取装置100可以包括能够承担数字图像获取的任何装置或装置的集合。本文使用的术语“电子图像获取装置”可以指代能够进行数字图像拍摄的外形较小的便携式电子装置，诸如，例如数字相机、蜂窝电话、个人数字助理(PDA)、移动计算平板、个人媒体播放器装置、无线网络观看装置、应用特定装置等，以及/或者上述装置的组合。在所例示的示例中，电子图像获取装置100可以包括光学传感器102、控制单元104和/或显示器160。这种光学传感器102可以被配置为获取对象(没有示出)的二维图像并且获取实时视频数据。控制单元104可以被配置为确定由光学传感器102获取的这种对象的增强现实表示。例如，控制单元104可以被配置为至少部分地基于对象的一个或更多个二维图像的分析来确定增强现实表示。本文使用的术语“增强现实表示”可以指代对物理的、真实世界的对象的实时直接观看或间接观看，诸如对象的三维图像等。可以诸如通过经由显示器106传递的视觉引导来向用户提供与获取对象的一个或更多个附加二维图像有关的引导。控制单元104可以利用对象的这种附加二维图像来更新这种对象的增强现实表示。此外，电子图像获取装置100还可以包括诸如存储器、处理器、网络接口逻辑等的附加项，出于简洁的目的，没有在图1中示出这些附加项。例如，电子图像获取装置100还可以包括诸如参照下面的图10描述的附加项。在一些示例中，显示器106可以被容纳在电子图像获取装置100中，或者显示器106可以是独本文档来自技高网...

【技术保护点】
一种方法，该方法包括以下步骤：由电子图像获取装置至少部分地基于对对象的一个或更多个二维图像的分析来确定所述对象的增强现实表示，其中，所述增强现实表示包括多个表面假设；确定与各个表面假设相关联的一个或更多个可靠性值；将所述一个或更多个可靠性值与一个或更多个阈值可靠性标准进行比较，以从所述多个表面假设中识别一个或更多个感兴趣表面区域；以及经由所述电子图像获取装置的显示器来显示与获取所述对象的一个或更多个附加的二维图像有关的引导，其中，所述引导是至少部分地基于所识别的感兴趣表面区域的。

【技术特征摘要】
【国外来华专利技术】1.一种方法，该方法包括以下步骤: 由电子图像获取装置至少部分地基于对对象的一个或更多个二维图像的分析来确定所述对象的增强现实表示，其中，所述增强现实表示包括多个表面假设； 确定与各个表面假设相关联的一个或更多个可靠性值； 将所述一个或更多个可靠性值与一个或更多个阈值可靠性标准进行比较，以从所述多个表面假设中识别一个或更多个感兴趣表面区域；以及 经由所述电子图像获取装置的显示器来显示与获取所述对象的一个或更多个附加的二维图像有关的引导，其中，所述引导是至少部分地基于所识别的感兴趣表面区域的。2.根据权利要求1所述的方法，该方法还包括以下步骤: 确定与各个感兴趣表面区域相关联的一个或更多个视角锥；以及 至少部分地基于质量水平输入来确定与所述一个或更多个视角锥相关联的观看范围和方向， 其中，所述引导是至少部分地基于与所述一个或更多个视角锥相关联的所述观看范围和方向的。3.根据权利要求2所述的方法，其中，所述一个或更多个视角锥各自包括由限定的视角界定并且以表面法向向量为中心的限定的观看区域。4.根据权利要求1所述的方法，该方法还包括以下步骤: 监测实时视频数据；以及 至少部分地基于所述实时视频数据来确定所述电子图像获取装置与所述对象之间的实时相对位置和方向， 其中，所述引导是至少部分地基于所述电子图像获取装置与所述对象之间的所确定的实时相对位置和方向的。5.根据权利要求1所述的方法，其中，所述增强现实表示包括所述对象的三维图像。6.根据权利要求1所述的方法，其中，采用随机抽样一致性表面提取(RANSAC)算法来计算所述多个表面假设。7.根据权利要求1所述的方法，其中，所述一个或更多个阈值可靠性标准包括以下标准中的一个或更多个:每面积像素阈值、不完整的图像数据阈值和/或缺少的图像数据阈值。8.根据权利要求1所述的方法，其中，所述引导指示用于获取所述对象的所述一个或更多个附加的二维图像的一个或更多个有利位置。9.根据权利要求1所述的方法，其中，所述引导指示与各个表面假设相关联的所述可靠性值。10.根据权利要求1所述的方法，该方法还包括以下步骤:从用户接收已经选择所述对象的一个或更多个二维图像的指示，其中，由电子图像获取装置确定所述对象的所述增强现实表示的步骤是至少部分地基于来自所述用户的指示的。11.一种电子图像获取装置，该电子图像获取装置包括: 光学传感器，其被配置为获取对象的二维图像并且获取实时视频数据；以及 控制单元，其被配置为: 至少部分地基于对所述对象的一个或更多个二维图像的分析来确定所述对象的增强现实表示，其中，所述增强现实表示包括多个表面假设； 确定与各个表面假设相关联的一个或更多个可靠性值； 将所述一个或更多个可靠性值与一个或更多个阈值可靠性标准进行比较，以从所述...

【专利技术属性】
技术研发人员：E·克鲁格里克，
申请(专利权)人：英派尔科技开发有限公司，
类型：
国别省市：