视觉数据上的直观增强现实协作制造技术

第一HMD与第二HMD之间的交互被检测，第一HMD和第二HMD各自被配置为在被表示在增强现实环境中的共享数据集上进行协作。检测到的交互可以使得第一HMD请求与第二HMD相关联的状态信息。第二HMD可以处理该请求以生成视觉数据作为对该请求的响应。第二HMD可以将视觉数据传送给第一HMD，使得第一HMD可以绘制视觉数据以与其自己的增强视图同时被显示。所绘制的视觉数据可以根据第二HMD的真实世界或虚拟位置被定位，以使得与第二HMD相关联的当前可见状态信息不妨碍第二HMD用户的视图。

Visual augmented reality collaboration on visual data

【技术实现步骤摘要】
【国外来华专利技术】视觉数据上的直观增强现实协作
技术介绍
诸如增强现实或“混合”现实等先进技术已经被并入社会的各个方面。包括游戏、企业、设计、娱乐等在内的行业正在将这些技术并入各种产品供给中，以提高用户体验和生产力。通过这样的技术而被支持的生产力提高的一个特定领域涉及协作工作环境。增强现实是一种本质上将计算机生成的图像叠加到用户的真实世界视图上的技术，使得该技术的用户可以感知包括被覆加有计算机生成的图像的真实世界视图的合成视图。在协作环境中，增强现实使得用户能够在真实世界环境内从多个角度探索感兴趣的主题。通常，该技术被并入单用户设备中，诸如被并入耦合到头戴式显示器的计算设备中。在这方面，基于用户在环境内的查看布置(viewingplacement)，可以通过用户的头戴式显示器针对每个用户的个人感知来绘制合成视图。换言之，如果将计算机生成的对象叠加在真实世界环境(例如，房间)内部，则环境内的每个用户将基于其在房间内和/或相对于计算机生成的对象的位置和取向从唯一的角度感知对象。以这种方式，一个用户可以查看对象的正面，同时穿过房间的另一用户可以查看对象的背面。类似地，第三用户可以查看对象的左侧，同时第四用户则可以查看对象的右侧。然而，在协作情况下，用户通常需要具有与其他协作方共享他们的贡献并且同样获取其他协作方的贡献的能力。然而，增强现实的单用户设备实现严重地限制了协作用户直观地获得其协作方的视图或状况。
技术实现思路
提供本
技术实现思路
以便以简化的形式介绍下面在具体实施方式中进一步描述的概念的选择。本
技术实现思路
既不旨在标识所要求保护的技术方案的关键特征或必要特征，也不旨在单独用于帮助确定所要求保护的技术方案的范围。本公开中描述的实施例旨在支持增强在现实(AR)环境中的视觉数据上的直观协作。换言之，实施例可以支持用于在协作的AR用户之间共享视图和/或状况的直观技术。尽管本公开主要将AR作为所实施的技术，但是诸如混合现实、全息术和虚拟现实等其他技术是仍然在本公开的范围内的技术。在一些实施例中，至少第一头戴式显示器(HMD)和第二HMD(各自作为协作参与方能够访问共享数据集)可以访问共享数据集。共享数据集可以由HMD中的每一个访问以绘制对佩戴相应HMD的用户可感知的计算机生成的视图或“增强视图”(例如，叠加在用户的真实世界视图之上的计算机生成的对象)。可以基于来自共享数据集的一组视觉数据来绘制每个增强视图。在一些另外的实施例中，可以根据检测到的查看布置在相应HMD上绘制每个增强视图。换言之，每个用户可以基于相对于计算机生成对象的绘制位置的用户的检测到的查看位置和取向来感知所叠加的计算机生成对象的独特视角。尽管在至少部分地绘制的增强视图的上下文中描述本公开的实施例，但是所设想的是，完全计算机生成的视图也在本文中描述的实施例的范围内。在一些实施例中，作为共享数据集的第一协作参与方的第一HMD可以初始化和/或检测被定向到作为共享数据集的第二协作参与方的第二HMD的交互。在各种实施例中，可以基于由与第一HMD和/或第二HMD相关联的一个或多个查看布置传感器支持的一个或多个用户输入来检测交互。在一些实施例中，可以基于第一HMD和第二HMD的相应查看布置来检测交互。例如，第一HMD的第一用户可以将他们的注视定向在第二用户处、第二用户的面部处、第二HMD处等(例如，与其对准)，使得第一HMD的查看传感器可以确定第一用户的视线被定向的位置。然后，第一HMD可以基于第二HMD的所获取的位置来确定第一用户的注视被定向到第二用户等。以这种方式并且仅作为示例，第一HMD可以检测被定向到第二HMD的交互。在一些实施例中，在检测到交互之后，第一HMD可以向第二HMD传送接收与第二HMD的状态相对应的一组视觉数据的请求。在各种实施例中，状态可以包括：由第二HMD当前绘制、提供以用于显示和/或显示的增强视图(下文中统称为“当前增强视图”)；增强视图的状况(例如，缩放级别、位置、取向、深度、角度)；与第二HMD相关联的状况；任何上述内容的存储副本；在语义上描述任何上述内容的描述性注释(下文中称为“描述性注释”)；或其任何组合。在一些实施例中，第二HMD可以基于被定向到第二HMD的第一HMD的交互来从第一HMD接收请求。第二HMD可以在对第一HMD进行响应之前处理各种任务。仅作为示例，第二HMD可以验证第一HMD是共享数据集的协作参与方。第二HMD还可以确定与请求的第一HMD相关联的各种特权和/或限制。例如，与第二HMD相关联的隐私策略可以指示可以响应于所接收的请求而被传送给第一HMD的状态信息的量和/或类型。在这方面，在一些实施例中，第二HMD可以响应于来自第一HMD的请求而传送与第二HMD的状态相对应的一组AR数据的至少一部分。仅作为示例，响应于所接收的请求并且根据引用的隐私策略，第二HMD可以传送其当前增强视图的任何部分、当前增强视图的状况、设备本身的状况(例如，电池水平、正在被执行的应用、正在被消耗的媒体、用户可用性等)、任何上述内容的存储副本、在语义上描述任何上述内容的描述性注释、或其任何组合。在一些实施例中，第一HMD可以从第二HMD接收所传送的一组视觉数据或者该组视觉数据的至少所传送的部分。然后，第一HMD可以对该组视觉数据的所接收的至少一部分进行绘制、提供以用于显示和/或显示，作为由其用户感知到的计算机生成的(多个)对象。在一些另外的实施例中，第一HMD可以在由其用户可感知为与第二用户等相邻(例如，上方、旁边、下方、对角线、偏移)的位置处对新的计算机生成的对象和/或对其增强视图的增强进行绘制、提供以用于显示和/或显示，使得新的对象或添加物不妨碍第一用户的可见性和与第二用户(例如，第二用户的面部)的个人互动。以这种方式，协作的AR用户可以直观地了解其协作方的视图和/或状况，而无需弄清楚和/或中断协作工作流。附图说明下面参考附图详细描述本公开的方面，在附图中：图1是根据本公开的一些实施例的示例操作环境的示图；图2是描绘根据本公开的一些实施例的计算架构的示例性组件的框图；图3是描绘根据本公开的一些实施例的计算架构的示例性组件的框图；图4A-图4C是根据本公开的一些实施例的在增强现实环境中的视觉数据上的直观协作的示例性实现的示意图；图5A-图5D是根据本公开的一些实施例的在增强现实环境中的视觉数据上的直观协作的示例性实现的示意图；图6是根据本公开的一些实施例的示例性HMD的框图；图7是示出根据本公开的一些实施例的用于支持在增强现实环境中的视觉数据上的直观协作的方法的流程图；图8是示出根据本公开的一些实施例的用于支持在增强现实环境中的视觉数据上的直观协作的方法的流程图；以及图9是适合用于实现本专利技术的实施例的示例性计算环境的框图。具体实施方式本文中具体描述本公开的方面的技术方案以满足法定要求。然而，说明书本身并不旨在限制本专利的范围。相反，专利技术人已经设想到，所要求保护的技术方案还可以结合其他当前或未来技术以其他方式实施，以包括与本文档中描述的本文档来自技高网...

【技术保护点】
1.一种计算机存储介质，存储计算机可用指令，所述计算机可用指令在由一个或多个计算设备使用时使得所述一个或多个计算设备执行用于支持在增强现实环境中的视觉数据上的直观协作的操作，所述操作包括：/n检测第一HMD与第二HMD之间的交互，所述第一HMD具有第一查看布置，并且所述第二HMD具有第二查看布置，并且其中所述交互至少部分地基于相对于所述第二查看布置的所述第一查看布置被检测；/n至少部分地基于所检测到的所述交互，向所述第二HMD发送针对与所述第二HMD的状态相对应的一组视觉数据的请求；/n至少部分地基于所述第一HMD和所述第二HMD是协作增强现实环境的参与方的确定，从所述第二HMD接收所述一组视觉数据的至少一部分；以及/n由所述第一HMD绘制所述一组视觉数据的所接收的所述至少一部分。/n

【技术特征摘要】
【国外来华专利技术】20170428 US 15/582,1811.一种计算机存储介质，存储计算机可用指令，所述计算机可用指令在由一个或多个计算设备使用时使得所述一个或多个计算设备执行用于支持在增强现实环境中的视觉数据上的直观协作的操作，所述操作包括：
检测第一HMD与第二HMD之间的交互，所述第一HMD具有第一查看布置，并且所述第二HMD具有第二查看布置，并且其中所述交互至少部分地基于相对于所述第二查看布置的所述第一查看布置被检测；
至少部分地基于所检测到的所述交互，向所述第二HMD发送针对与所述第二HMD的状态相对应的一组视觉数据的请求；
至少部分地基于所述第一HMD和所述第二HMD是协作增强现实环境的参与方的确定，从所述第二HMD接收所述一组视觉数据的至少一部分；以及
由所述第一HMD绘制所述一组视觉数据的所接收的所述至少一部分。


2.根据权利要求1所述的介质，其中所述第二HMD的所述状态是由所述第二HMD根据所述第二查看布置绘制或提供以用于显示的第二增强视图。


3.根据前述权利要求中的任一项所述的介质，其中所述一组视觉数据的所接收的所述至少一部分由所述第一HMD根据所述第二查看布置来绘制。


4.根据权利要求2或3所述的介质，其中所述一组视觉数据的所述至少一部分包括至少一个描述性注释，所述至少一个描述性注释各自在语义上描述以下中的至少一项：所述第二增强视图、所述第二增强视图的条件和与所述第二HMD相关联的状况信息。


5.根据权利要求2、3或4所述的介质，其中所述至少一个描述性注释由所述第一HMD至少部分地根据相对于所述第二查看布置的所述第一查看布置来绘制。


6.根据前述权利要求中的任一项所述的介质，其中所述第二HMD被配置为根据与所述第二HMD相关联的隐私策略来过滤所述一组视觉数据，以提供所述一组视觉数据的所...

【专利技术属性】
技术研发人员：M·帕胡德，N·里什，E·奥菲克，C·赫特，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国;US