照片表示视图的基于主题的增强制造技术

本发明专利技术涉及照片表示视图的基于主题的增强。提供一种在被配置为提供用户所处的物理环境的、用户视点的照片表示视图的显示器上的方法(200)，该方法包括从该用户接收(202)选择在增强该照片表示视图中使用的主题的输入。该方法还包括光学地且实时地获得(204)该物理环境的环境信息并且基于该环境信息生成(208)该物理环境的空间模型。该方法还包括经由对该空间模型的分析，标识(210)该空间模型内的一个或多个特征，其中每个特征对应于该物理环境中的一个或多个物理特征。该方法还包括基于这种分析，在该显示器上显示(212)所标识的特征的增强，该增强与该主题相关联。

【技术实现步骤摘要】

本专利技术涉及照片表示视图的基于主题的增强。
技术介绍
存在用于模拟用户可沉浸于其中的虚拟环境的虚拟现实系统。显示器(诸如平视显示器、头戴式显示器等)可被用来显示虚拟环境。可能期望向用户提供这样一种虚拟现实体验，即用户不完全沉浸其中，而是与真实环境保持某种程度的连接。因此，正在开发增强现实系统，以用图形、声音等增强用户对真实世界环境的感知。作为示例，增强现实系统可被用来提供座舱模拟环境，该环境将真实物体与虚拟图像集成以进行飞行培训和模拟。现有增强现实技术通常依赖于预定数据，诸如模拟环境的预先配置的模型等，以使虚拟元素被适当地集成。
技术实现思路
根据本公开的一个方面，根据用户选择的主题增强用户对他们的环境的视图。具体而言，显示器向用户提供用户的环境的用户视点(vantage point)的照片表示(photorepresentative)视图。显示器还显示与用户选择的主题相关联的增强，以增强该视图。这样的增强的显示是基于物理环境的空间模型的，该空间模型被实时生成和分析以标识可被增强的特征。这些所标识的特征与物理环境中的物理特征相对应。提供本
技术实现思路
以便以简化形式介绍将在以下具体实施方式中进一步描述的一些概念。本
技术实现思路
并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中所提及的任何或所有缺点的实现。附图说明图IA示出根据本公开的一实施例的示例使用环境。图IB不出根据本公开的一实施例的另一不例使用环境。图2示出根据本公开的一实施例的提供照片表示视图的基于主题的增强的示例方法。图3示出根据本专利技术的一实施例的形成空间模型的示例示意性图示。图4示出根据本专利技术的一实施例的示例性的基于主题的增强。图5示出根据本专利技术的一实施例的示例计算系统。具体实施例方式此处公开了涉及提供照片表示视图的基于主题的增强的实施例。照片表示视图由显示器提供，并且是用户位于其中的物理环境、用户视点的视图的相当逼真(例如，类似照片)的表示。用这种方式增强用户对他们的环境的感知允许用户体验他们的环境的主题化视图(themed view),同时仍然与环境本身保持一定程度的连接。现在将通过示例并参照所示的以上列出的实施例来描述本专利技术的各方面。在一个或多个实施例中基本相同的组件、过程步骤和其它元素被协调地标识并且以重复最小的方式描述。然而应该注意，协调地标识的元素还可以在某种程度上不同。还应该注意，本专利技术中包括的附图是示意性的并且通常未按照比例绘制。相反，附图中所示的各种绘制比例、纵横比和组件数量可以有目的地失真，以使特定特征或关系更加显见。图IA示出了根据本公开的一实施例的示例使用环境(即用户102所处的物理环境100)的示意性图示。应当理解，图IA是出于说明性目的的，而不是按比例绘制的。此外，尽管在本示例中将物理环境100示出为起居室，然而应当理解，这种环境是说明性的，而因此不旨在以任何方式构成限制。相反，物理环境100可以是用户102所处的基本上任何类型的物理环境，包括但不限于室内环境、室外环境、熟悉的环境、不熟悉的环境等。除了用户102之外，物理环境100还包括若干物理特征104，包括沙发104a、咖啡桌104b、以及狗104c。 图IA还示出了用于经由显示输出提供基于主题的增强的显示系统106。显示系统106包括显示器108，该显示器被配置为提供用户102的视点的、物理环境100的照片表示视图。显示器108的非限制性示例包括平视显示器(HUD)、头戴式显示器(HMD)等。在一些实施例中，显示器108可以是具有一个或多个足够透明的部分的光学透视显示器。这种显示器经由透明部分提供照片表示视图，其中物理环境透过所述透明部分对用户可见。然而，在其他实施例中，显示器108可以是沉浸式显示器，该沉浸式显示器被配置为通过显示该环境的空间模型的经完全渲染的图像来提供照片表示视图。显示系统106被配置为接收一个或多个用户输入(例如，经由输入设备)，包括选择用于增强该照片表示视图的主题的输入。作为响应，显示系统106标识该环境中的可根据该主题增强的物理特征(例如，物体、人、建筑物等)，诸如物理特征104，然后显示这样的增强(例如，同时仍然提供该照片表示视图的至少一些)。用这种方式，用户102体验物理环境100的主题化视图，同时仍然与环境本身保持某种程度的连接。作为示例，显示器108可显示用户102感知为覆盖物理特征104的图像，以根据所选择的主题增强物理环境100。如后文参考图2更详细地描述的，这种显示系统可利用图像捕捉设备(诸如深度相机)来获得关于物理环境100的信息，该显示系统可利用该信息来生成该环境的空间模型。然后该显示系统可分析该模型以标识该模型内可被增强的特征。应当理解，如图IA所示的显示系统106不是限制性的。在其他实施例中，显示系统的一个或多个组件可在外部实现以在显示器108处提供照片表示视图。图IB示出了另一示例物理环境(即，物理环境100B)中的用户102的示意性图示，其中显示系统106B提供/传送照片表示视图以在显示器108处查看。如后文参考图3更详细地描述的，这种显示系统可利用图像捕捉系统(诸如深度相机)来跟踪用户102和物理环境来生成例如用户视点的该物理环境的空间模型。该显示系统(例如，显示系统106、显示系统106B)可被配置为用任何适当方式提供基于主题的增强。图2示出了提供照片表示视图的基于主题的增强的示例方法200。这种方法可以由显示系统(例如，显示系统106、显示系统106B)通过例如执行存储于其上的指令而提供。在202，方法200包括从用户接收选择在增强照片表示视图中使用的主题的输入。这种输入可以从被配置为与该显示系统通信的输入设备接收，诸如在显示器(例如，显示器108)上或在另一位置处显示的用户可选按钮、虚拟按钮或其他用户界面等。在204，方法200包括光学地且实时地，获得物理环境的环境信息。这种环境信息可以是描述物理环境及其特征(诸如图IA中所示的物理环境100的物理特征104)的任何适当信息。适当环境信息的示例包括但不限于图像数据(例如，色彩信息、深度信息、红外信息等)、尺寸数据、表面数据、运动数据、音频数据等。显示系统(例如，显示系统106、显示系统106B)可被配置为以任何适当方式获得物理环境(例如，物理环境100、物理环境100B)的环境信息。作为非限制性示例，该显示系统可进一步包括被配置为光学地并实时地获得这种环境信息的一个或多个传感器。如此，方法200可包括经由与该显示器相关联的一个或多个传感器来检测该环境信息，如在206所指示的。 在一些实施例中，这种传感器可位于显示器108附近，以便从用户102的视点捕捉环境信息。图IA示出了与显示器108相关联并被放置于显示器108附近的这种示例传感器110。然而，作为另一示例，图IB示出了与显示器108相关联且被放置在离显示器108 —定距离处的示例传感器110B。在后一种情况下，显示系统106B可以被配置为基于所检测的信息确定用户102的视点。作为非限制性示例，传感器可包括捕捉设备，诸如视觉地监视或跟踪物理环境及其特征的所观察的场景的深度相机。通过跟踪用户102的位置和定本文档来自技高网...

【技术保护点】

【技术特征摘要】
2011.03.10 US 13/044,8951.一种在被配置为提供用户所处的物理环境的、用户视点的照片表示视图的显示设备上，提供所述照片表示视图的基于主题的增强的方法(200)，所述方法包括 从所述用户接收(202)选择在增强所述照片表示视图中使用的主题的输入； 光学地且实时地获得(204)所述物理环境的环境信息； 基于所述环境信息生成(208)所述物理环境的空间模型； 经由对所述空间模型的分析，标识(210)所述空间模型内的一个或多个特征，每个特征对应于所述物理环境中的一个或多个物理特征；以及 基于这种分析，在所述显示器上显示(212)所标识的特征的增强，所述增强与所述主题相关联。2.如权利要求I所述的方法，其特征在于，还包括在分析所述空间模型后，从与所述主题相关联的多个增强中选择所述增强，这种选择基于所标识的一个或多个特征。3.如权利要求I所述的方法，其特征在于，显示所述增强包括显示所述用户视点的、覆盖所述物理环境中与所标识的特征相对应的物理特征的图像。4.如权利要求I所述的方法，其特征在于，所述显示器是被配置为经由所述显示器的一个或多个足够透明的部分提供所述照片表示视图的光学透视显示器，其中所述物理环境透过所述一个或多个足够透明的部分对所述用户可见。5.如权利要求4所述的方法，其中显示所述增强包括将虚拟物体覆盖到所述空间模型的所述所标识的特征上，以及显示所述虚拟物体的图像，其中所述虚拟物体的图像在所述用户视点上覆盖所述物理环境中透过所述显示器对所述用户可见...

【专利技术属性】
技术研发人员：D·J·维戈多尔，M·泰德斯克，
申请(专利权)人：微软公司，
类型：发明
国别省市：