支持增强现实的交互和协作的系统和方法技术方案

本发明专利技术实施例提供了一种用于在远程终端用户之间执行网上协作和交互的新颖系统和/或方法。本发明专利技术实施例产生的感知效果是：每个用户共享相同的物理工作区，而每个人实际上位于不同的物理环境中。以这种方式，本发明专利技术实施例允许用户之间的更加无缝交互，同时减轻他们使用公共计算机外围设备，诸如鼠标、键盘和其它常用于执行这类交互的硬件的负担。

【技术实现步骤摘要】
【国外来华专利技术】相关申请案交叉申请本申请要求2014年3月31日递交的专利技术名称为“支持增强现实的交互和协作的系统和方法(SYSTEM AND METHOD FOR AUGMENTED REALITY-ENABLED INTERACTIONS AND COLLABORATION)”的第14/231,375号美国非临时专利申请的在先申请优先权，该在先申请的全部内容以引入的方式并入本文本中。
技术介绍
通过同时双向传输采用远程协作技术，诸如视频会议软件，使远程位置上的多个用户一起参加会议。然而，执行这类任务的许多传统系统无法建立参与者在其中能够享受相同物理工作区内的共享存在感的通信环境。正因如此，远程用户之间通过通信网络执行协作和交互可能会成为一项艰巨的任务。因此，需要一种方案，使通过通信网络执行协作会话的参与者具有相互共享相同物理工作区的感觉，同时在此等事件期间还能提高用户体验。
技术实现思路
本专利技术实施例提供了一种用于在远程终端用户之间执行网上协作和交互的新颖系统和/或方法。本专利技术实施例产生的感知效果是：每个用户共享相同的物理工作区，而每个人实际上位于不同的物理环境中。以这种方式，本专利技术实施例允许用户之间的更加无缝交互，同时减轻他们使用公共计算机外围设备，诸如鼠标、键盘和其它常用于执行这类交互的硬件的负担。附图说明附图包含在并且构成本说明书的一部分，其中相同的数字描绘相同的元件，附图说明本专利技术的实施例，并且与描述内容一起用于解释本专利技术的原理。图1A描绘了根据本专利技术实施例的在用于执行支持增强现实的交互和协作的客户端设备上实施的示例性硬件配置。图1B描绘了根据本专利技术实施例的驻留在由用于执行支持增强现实的交互和协作的客户端设备执行的存储器中的示例性部件。图2描绘了根据本专利技术实施例的用于在执行支持增强现实的交互和协作期间从本地环境实时捕获真实信息的示例性本地媒体数据计算模块。图3描绘了根据本专利技术实施例的用于在执行支持增强现实的交互和协作期间处理通过通信网络从远程客户端设备接收的数据的示例性远程媒体数据计算模块。图4描绘了根据本专利技术实施例的用于生成虚拟工作区显示以执行支持增强现实的交互和协作的示例性基于对象的虚拟空间构成模块。图5描绘了根据本专利技术实施例的用于执行支持增强现实的交互和协作的示例性多客户端实时通信。图6A为根据本专利技术实施例的一种用于在通过通信网络执行的协作会话期间生成本地媒体数据的示例性计算机实施方法的流程图。图6B为根据本专利技术实施例的一种生成构造数据以创建用于通过通信网络执行的协作会话的虚拟工作区显示的示例性计算机实施方法的流程图。图6C为根据本专利技术实施例的一种在通过通信网络执行的协作会话期间同时呈现虚拟工作区显示和检测手势输入的示例性计算机实施方法的流程图。图7A描绘了根据本专利技术实施例的用于执行支持增强现实的交互和协作的示例性用例。图7B描绘了根据本专利技术实施例的用于执行支持增强现实的交互和协作的另一示例性用例。图7C描绘了根据本专利技术实施例的用于执行支持增强现实的交互和协作的再一示例性用例。具体实施方式现将详细地对本专利技术的各种实施例、附图示出的示例做出参考。虽然会结合这些实施例进行描述，但可以理解的是它们并不用于将本专利技术限制于这些实施例。相反，本专利技术公开旨在覆盖可以包括在由所附权利要求书限定的本专利技术公开的精神和范围内的替代物、修改和等同物。另外，在以下本专利技术的详细描述中，阐述了许多特定细节以便提供对本专利技术的透彻理解。然而，可以理解的是，实际应用中，可以不包括本专利技术的这些特定细节。在其它实例中没有详细描述众所周知的方法、流程、部件和电路，以免对本专利技术的各方面造成不必要地模糊。虽然结合优选实施例描述该请求保护的主题，但应该理解它们不是旨在将请求保护的主题限制于这些实施例。相反，请求保护的主题旨在覆盖可以包括在由附加的权利要求书的精神和范围内的替代物、修改和等同物。此外，在本请求保护的主题的实施例的以下具体描述中，阐述许多具体细节以便提供对本请求保护的主题的透彻理解。然而，所属领域的普通技术人员将认识到，可以在没有这些具体细节的情况下实践本请求保护的主题。在其它实例中没有详细描述众所周知的方法、流程、部件和电路，以免对本请求保护的主题的各方面造成不必要地模糊。该具体实施方式的一些部分按照程序、步骤、逻辑块、处理、以及对计算机存储器中的数据位的操作的其它符号表示来呈现。这些描述和表示是数据处理领域技术人员向该领域其他技术人员有效传达工作实质内容使用的方法。将程序、计算机产生的步骤、逻辑块、过程等一般设想为首尾一致的步骤或指令序列，以产生期望的结果。这些步骤需要物理量的物理操控。通常，并不是完全必须的，这些量以电信号或磁信号的形式存在，可以被存储、转移、合并和比较，否则将在电脑系统中被操控。有时候这种方法被证明是行之有效的，主要出于常见用法的考虑，将这些信号作为比特位、数值、元素、符号、字符、术语、或数字等等。然而，应牢记，所有这些和类似术语与适当物理量相关联，且仅为应用于这些量的方便标签。除非确切地陈述为从以下论述显而易见，否则应了解，在本请求保护的主题中，利用例如“捕获”、“接收”、“渲染”等术语的论述是指将表示为计算机系统的寄存器和存储器内的物理(电子)量的数据操控和变换为类似地表示为计算机系统存储器或寄存器或其它此类信息储存、传输或显示设备内的物理量的其它数据的、包括内嵌系统的计算机系统或集成电路或类似电子计算设备的动作和进程。因此，本专利技术实施例提供了一种用于执行支持增强现实的交互和协作的系统和/或方法。用于执行支持增强现实的交互和协作的示例性客户端设备图1A描绘了本专利技术各实施例使用的示例性硬件配置。尽管图1A公开了具体部件，但是应了解，此类部件是示例性的。也就是，本专利技术实施例非常适合拥有各种其它硬件部件或图1A列举的部件的变体。应了解，图1A的硬件部件可以与除那些展示的部件之外的其它部件一起操作，并且不需要图1A所描述的所有硬件部件来实现本专利技术的目标。客户端设备101可以实施为能够通过通信网络与其它远程计算机系统通信的电子设备。客户端设备101可以实施为，例如数字摄像机、手机摄像机、便携式电子设备(例如音频设备、娱乐设备、手持设备)、网络摄像机、视频设备(例如可携式摄像机)等等。客户端设备101的部件可以包括如下相应功能：确定和配置相应光属性和设置，包括但不限于，对焦、曝光、上色或白平衡，以及兴趣领域(例如，通过对焦马达、光圈控制等)。此外，客户端设备101的部件可以通过内部通信总线105耦合以及接收/传输图像数据以通过这种通信总线进一步处理。在其最基本的硬件配置中，客户端设备101可以包括传感器100、计算机存储介质135、可选图形系统141、复用器260、处理器110和可选显示设备111。传感器100可以包括多个传感器，它们的排列方式使得从客户端设备101外部的本地化环境中实时捕获不同形式的真实信息。可选图形系统141可以包括图形处理器(未图示)，其可用于处理来自驻留在计算机可读存储介质135中的应用的指令以及通过内部总线105与处理器110传送数据。可以通过帧缓存以将数据呈现在可选显示设备111上的方式来传送数据。以这种方式，可选图形系统141可以根据呈现命令生成输出图像的像素数据以及可配置为由多本文档来自技高网...

【技术保护点】
一种装置，其特征在于，包括：传感器，可用于捕获关于本地用户物理环境的第一组传感器数据；接收器，可用于通过通信网络接收关于远程用户物理环境的第二组传感器数据，其中，所述第一和第二组传感器数据包括从多个不同传感器收集的坐标数据；处理器，可用于使用所述第一和第二组传感器数据将虚拟工作区显示呈现在计算机系统上，其中，所述虚拟工作区显示包括计算机生成的房间陈设以产生所述本地用户和所述远程用户共享相同物理房间的感知效果。

【技术特征摘要】
【国外来华专利技术】2014.03.31 US 14/231,3751.一种装置，其特征在于，包括：传感器，可用于捕获关于本地用户物理环境的第一组传感器数据；接收器，可用于通过通信网络接收关于远程用户物理环境的第二组传感器数据，其中，所述第一和第二组传感器数据包括从多个不同传感器收集的坐标数据；处理器，可用于使用所述第一和第二组传感器数据将虚拟工作区显示呈现在计算机系统上，其中，所述虚拟工作区显示包括计算机生成的房间陈设以产生所述本地用户和所述远程用户共享相同物理房间的感知效果。2.根据权利要求1所述的装置，其特征在于，所述传感器还可用于将所述坐标数据统一到公共空间坐标系内以生成所述虚拟工作区显示。3.根据权利要求1或权利要求2所述的装置，其特征在于，所述传感器还可用于将所述坐标数据转换到所述多个不同传感器中的特定传感器识别的空间坐标系中。4.根据权利要求1所述的装置，其特征在于，所述处理器还可用于处理通过所述通信网络从所述远程用户和/或所述本地用户接收的输入以操控当前呈现在所述虚拟工作区显示上的对象。5.根据权利要求4所述的装置，其特征在于，所述处理器还可用于处理从所述远程用户或所述本地用户接收的空中手势以操控所述对象。6.根据权利要求1至5任一项所述的装置，其特征在于，所述处理器还可用于对所述第一组传感器数据执行计算机实施的分割过程以检测所述本地用户物理环境内的所述本地用户。7.根据权利要求1至5任一项所述的装置，其特征在于，所述处理器还可用于对所述第一组传感器数据执行计算机实施的分割过程以检测位于所述本地用户物理环境内的兴趣对象。8.根据权利要求1至7任一项所述的装置，其特征在于，所述虚拟工作区显示产生所述本地用户和多个远程用户共享所述相同物理房间的感知效果。9.根据权利要求8所述的装置，其特征在于，所述处理器还可用于根据预定布局符合度度量调整所述虚拟工作区显示以统一地、远程地呈现所述多个远程用户。10.根据权利要求1所述的装置，其特征在于，所述坐标数据包括...

【专利技术属性】
技术研发人员：贾娜·艾曼，周梁，奥努尔·G·古勒尔尤兹，吕风骏，朱凤卿，纳文·达尔，
申请(专利权)人：华为技术有限公司，
类型：发明
国别省市：广东;44