用于衰减模拟现实(SR)空间中的联合用户交互的方法和设备技术

在各种具体实施中，描述了用于衰减SR空间中的联合用户交互的方法和设备。在一个具体实施中，基于对化身社会交互标准的破坏来衰减化身的方法在被提供以递送模拟现实(SR)内容的设备处执行。在一个具体实施中，SR布景中的紧密协作的方法在被提供以递送SR内容的设备处执行。

【技术实现步骤摘要】
【国外来华专利技术】用于衰减模拟现实(SR)空间中的联合用户交互的方法和设备
本公开整体涉及衰减模拟现实布景中的联合用户交互。
技术介绍
物理布景是指无需电子系统帮助个体就能够感知和/或个体能够交互的世界。物理布景(例如，物理森林)包括物理元素(例如，物理树、物理结构和物理动物)。个体可直接与物理布景相互作用和/或感知物理布景，诸如通过触摸、视觉、嗅觉、听觉和味觉。相比之下，模拟现实(SR)布景是指经由电子系统个体能够感知和/或个体能够交互的完全或部分由计算机创建的布景。在SR中，监测个体移动的子集，并且响应于此，以符合一个或多个物理定律的方式使SR布景中的一个或多个虚拟对象的一个或多个属性变化。例如，SR系统可检测到个体向前走几步，并且响应于此，以类似于此类情景和声音在物理布景中会如何变化的方式来调节呈现给个体的图形和音频。也可响应于移动的表示(例如，音频指令)而进行对SR布景中一个或多个虚拟对象的一个或多个属性的修改。个体可使用他的任何感觉(包括触觉、嗅觉、视觉、味觉和声音)与SR对象进行交互和/或感知SR对象。例如，个体可与创建多维(例如，三维)或空间听觉布景和/或实现听觉透明性的听觉对象进行交互和/或感知听觉对象。多维或空间听觉布景为个体提供了在多维空间中对离散听觉源的感知。在具有或不具有计算机创建的音频的情况下，听觉透明性选择性地结合来自物理布景的声音。在一些SR布景中，个体可仅与听觉对象进行交互和/或仅感知听觉对象。SR的一个示例是虚拟现实(VR)。VR布景是指被设计为仅包括针对至少一种感觉的计算机创建的感官输入的模拟布景。VR布景包括个体可与之交互和/或对其进行感知的多个虚拟对象。个体可通过在计算机创建的布景内模拟个体动作的子集和/或通过对个体或其在计算机创建的布景内的存在的模拟，来与VR布景中的虚拟对象进行交互和/或感知VR布景中的虚拟对象。SR的另一个示例是混合现实(MR)。MR布景是指被设计为将计算机创建的感官输入(例如，虚拟对象)与来自物理布景的感官输入或其表示集成的模拟布景。在现实谱系上，混合现实布景介于一端的VR布景和另一端的完全物理布景之间并且不包括这些布景。在一些MR布景中，计算机创建的感官输入可以适应于来自物理布景的感官输入的变化。另外，用于呈现MR布景的一些电子系统可以监测相对于物理布景的取向和/或位置，以使虚拟对象能够与真实对象(即来自物理布景的物理元素或其表示)交互。例如，系统可监测运动，使得虚拟植物相对于物理建筑物看起来是静止的。混合现实的一个示例是增强现实(AR)。AR布景是指至少一个虚拟对象叠加在物理布景或其表示之上的模拟布景。例如，电子系统可具有不透明显示器和至少一个成像传感器，成像传感器用于捕获物理布景的图像或视频，这些图像或视频是物理布景的表示。系统将图像或视频与虚拟对象组合，并在不透明显示器上显示该组合。个体使用系统经由物理布景的图像或视频间接地查看物理布景，并且观察叠加在物理布景之上的虚拟对象。当系统使用一个或多个图像传感器捕获物理布景的图像，并且使用那些图像在不透明显示器上呈现AR布景时，所显示的图像被称为视频透传。另选地，用于显示AR布景的电子系统可具有透明或半透明显示器，个体可通过该显示器直接查看物理布景。该系统可在透明或半透明显示器上显示虚拟对象，使得个体使用该系统观察叠加在物理布景之上的虚拟对象。又如，系统可包括将虚拟对象投影到物理布景中的投影系统。虚拟对象可例如在物理表面上或作为全息图被投影，使得个体使用该系统观察叠加在物理布景之上的虚拟对象。增强现实布景也可指其中物理布景的表示被计算机创建的感官信息改变的模拟布景。例如，物理布景的表示的一部分可被以图形方式改变(例如，放大)，使得所改变的部分仍可代表一个或多个初始捕获的图像但不是忠实再现的版本。又如，在提供视频透传时，系统可改变传感器图像中的至少一者以施加不同于一个或多个图像传感器捕获的视点的特定视点。再如，物理布景的表示可通过以图形方式将其部分进行模糊处理或消除其部分而被改变。混合现实的另一个示例是增强虚拟(AV)。AV布景是指计算机创建布景或虚拟布景并入来自物理布景的至少一个感官输入的模拟布景。来自物理布景的一个或多个感官输入可为物理布景的至少一个特征的表示。例如，虚拟对象可呈现由一个或多个成像传感器捕获的物理元素的颜色。又如，虚拟对象可呈现出与物理布景中的实际天气条件相一致的特征，如经由天气相关的成像传感器和/或在线天气数据所识别的。在另一个示例中，增强现实森林可具有虚拟树木和结构，但动物可具有从对物理动物拍摄的图像精确再现的特征。许多电子系统使得个体能够与各种SR布景进行交互和/或感知各种SR布景。一个示例包括头戴式系统。头戴式系统可具有不透明显示器和一个或多个扬声器。另选地，头戴式系统可以被设计为接收外部显示器(例如，智能电话)。头戴式系统可具有分别用于拍摄物理布景的图像/视频和/或捕获物理布景的音频的一个或多个成像传感器和/或麦克风。头戴式系统也可具有透明或半透明显示器。透明或半透明显示器可结合基板，表示图像的光通过该基板被引导到个体的眼睛。显示器可结合LED、OLED、数字光投影仪、激光扫描光源、硅上液晶，或这些技术的任意组合。透射光的基板可以是光波导、光组合器、光反射器、全息基板或这些基板的任意组合。在一个实施方案中，透明或半透明显示器可在不透明状态与透明或半透明状态之间选择性地转换。又如，电子系统可以是基于投影的系统。基于投影的系统可使用视网膜投影将图像投影到个体的视网膜上。另选地，投影系统还可将虚拟对象投影到物理布景中(例如，投影到物理表面上或作为全息图)。SR系统的其他示例包括平视显示器、能够显示图形的汽车挡风玻璃、能够显示图形的窗口、能够显示图形的镜片、耳机或耳塞、扬声器布置、输入机构(例如，具有或不具有触觉反馈的控制器)、平板电脑、智能电话，以及台式计算机或膝上型计算机。SR技术允许用户之间的社会交互，即使当用户不物理彼此靠近时也是如此。然而，不存在防止两个虚拟化身试图占据相同虚拟空间的限制。附图说明因此，本公开可被本领域的普通技术人员理解，更详细的描述可参考一些例示性具体实施的方面，其中一些具体实施在附图中示出。图1示出了根据一些具体实施的由多个用户共享的示例性SR布景。图2A示出了根据一些具体实施的衰减谱。图2B示出了根据一些具体实施的用于确定衰减谱的示例性信任度量。图3示出了根据一些具体实施的音频内容衰减。图4示出了根据一些具体实施的从各种角度的联合用户交互的衰减。图5A至图5J示出了根据一些具体实施的SR布景中的用户交互的衰减的示例性用户界面。图6A至图6D示出了根据一些具体实施的SR布景中的紧密协作的示例性用户界面。图7是根据一些具体实施的基于对化身社会交互标准的破坏的化身衰减的方法的流程图表示。图8是根据一些具体实施的SR布景中的联合用户紧密交互的方法的流程图表示。图9是根据一些具体实施的计算设备的框图。根据通常的做法，附本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n在具有一个或多个处理器、非暂态存储器以及一个或多个显示器的设备处：/n使用所述一个或多个显示器向第一用户显示模拟现实(SR)内容，所述SR内容包括与第二用户相关联的化身；/n确定与所述第二用户相关联的所述化身的行为是否破坏一个或多个化身社会交互标准；以及/n根据确定与所述第二用户相关联的所述化身的所述行为破坏所述一个或多个化身社会交互标准，衰减与所述第二用户相关联的所述化身的至少一部分。/n

【技术特征摘要】
【国外来华专利技术】20180920 US 62/733,8051.一种方法，包括：
在具有一个或多个处理器、非暂态存储器以及一个或多个显示器的设备处：
使用所述一个或多个显示器向第一用户显示模拟现实(SR)内容，所述SR内容包括与第二用户相关联的化身；
确定与所述第二用户相关联的所述化身的行为是否破坏一个或多个化身社会交互标准；以及
根据确定与所述第二用户相关联的所述化身的所述行为破坏所述一个或多个化身社会交互标准，衰减与所述第二用户相关联的所述化身的至少一部分。


2.根据权利要求1所述的方法，其中衰减与所述第二用户相关联的所述化身的至少所述部分包括通过一个或多个音频扬声器减小来自所述第二用户的音频的回放。


3.根据权利要求2所述的方法，其中衰减与所述第二用户相关联的所述化身的至少所述部分包括通过一个或多个音频扬声器使来自所述第二用户的音频的回放静音。


4.根据权利要求1至3中任一项所述的方法，其中衰减与所述第二用户相关联的所述化身的至少所述部分包括在所述一个或多个显示器上至少部分地淡出所述化身。


5.根据权利要求1至4中任一项所述的方法，其中衰减与所述第二用户相关联的所述化身的至少所述部分包括从所述一个或多个显示器移除所述化身的至少所述部分。


6.根据权利要求1至5中任一项所述的方法，其中衰减与所述第二用户相关联的所述化身的至少所述部分包括从所述一个或多个显示器移除所述化身。


7.根据权利要求1至6中任一项所述的方法，还包括：
根据确定所述一个或多个化身社会交互标准被破坏，指示第二设备衰减表示所述第一用户的第二化身的至少一部分，其中所述第二设备在所述设备外部，其中表示所述第一用户的所述第二化身由所述第二设备显示。


8.根据权利要求1至7中任一项所述的方法，还包括：
从所述第一用户接收输入；
确定所接收的输入是否是预定手势；以及
根据确定所接收的输入是所述预定手势，将所述化身移动到所述SR内容中的由所述第二设备显示的视场之外的位置。


9.根据权利要求1至8中任一项所述的方法，其中确定与所述第二用户相关联的所述化身的所述行为是否破坏所述一个或多个化身社会交互标准包括确定与所述第二用户相关联的所述化身是否已经接触表示所述用户的第二化身。


10.根据权利要求1至9中任一项所述的方法，其中确定与所述第二用户相关联的所述化身的所述行为是否破坏所述一个或多个化身社会交互标准包括确定与所述第二用户相关联的所述化身是否在表示所述用户的第二化身的阈值距离内。


11.根据权利要求1至10中任一项所述的方法，其中确定与所述第二用户相关联的所述化身的行为是否破坏一个或多个化身社会交互标准包括确定与和所述第二用户相关联的所述化身相关联的音频内容是否超过阈值强度。


12.一种设备，包括：
一个或多个处理器；
非暂态存储器；
一个或多个显示器；和
存储在所述非暂态存储器中的一个或多个程序，所述一个或多个程序在由所述一个或多个处理器执行时使所述设备执行权利要求1至11所述的方法中的任一种方法。


13.一种存储一个或多个程序的非暂态存储器，当由具有一个或多个显示器的设备的一个或多个处理器执行时，所述一个或多个程序使所述设备执行权利要求1至11所述的方法中的任一种方法。


14.一种设备，包括：
一个或多个处理器；
非暂态存储器；
一个或多个显示器；和
用于使所述设备执行权利要求1至11所述的方法中的任一种方法的装置。


15.一种设备，...

【专利技术属性】
技术研发人员：A·巴兹夫，A·H·帕朗吉耶，L·R·德利兹·森特诺，R·耐尔，
申请(专利权)人：苹果公司，
类型：发明
国别省市：美国;US