多视图虚拟现实用户界面制造技术

提供一种系统、用户界面和方法，用于接收由传感器记录的与用户的移动有关的输入，并且至少部分地基于到头戴式显示器(HMD)的内部显示器和外部显示器的输入来提供图像。内部显示器被设置为仅对穿戴HMD的用户可视，而外部显示器对不是用户的至少一个其他观察者可视。外部显示器可以促进社交互动、增强训练，并提供监视用户的虚拟活动。

【技术实现步骤摘要】
【国外来华专利技术】多视图虚拟现实用户界面
本公开总体上涉及用户界面，具体地涉及允许具有多视图功能的虚拟现实(VR)或增强现实(AR)用户界面。
技术介绍
本部分是旨在向读者介绍可能与下文所述的和/或所要求保护的本公开各个方面相关的现有技术的各方面。相信这样的讨论有助于向读者提供背景信息以便帮助更好地理解本公开的各方面。因此，应当理解，这些陈述应按这种方式解读，而不是作为对现有技术的承认。近年来，由虚拟现实(VR)和增强现实(AR)设备创建的沉浸式体验已成为越来越受到关注的主题。这是因为VR/AR可以实际上在每个领域中使用，以执行包括测试、娱乐、培训和教学的各种功能。例如，工程师和建筑师可以在新设计的建模中使用VR/AR。医生可以使用VR/AR技术以提前练习和完善困难的操作，军事专家可以通过模拟战场操作来制定策略。VR/AR还广泛地用于游戏和娱乐行业，以提供交互式体验并增强观众的娱乐性。VR/AR能够创建感觉真实的模拟环境，并可以准确地复制在真实或虚构世界中的体验。尽管VR/AR提供了独特的体验，但是大多数的使用提供了单人且单独的体验。该缺点赋予这样的体验反社会性，并且可能使该技术蒙受污名。此外，在需要观察者协助VR/AR系统用户的情况下(例如在训练演习期间)，无法共享体验提供了挑战。因此，需要能够包含更多社交VR/AR世界的多玩家和多共享环境。
技术实现思路
提供了一种系统、用户界面和方法，用于将与由传感器记录的用户穿戴的壳体的移动有关的输入发送给控制器。第一内部显示器和第二外部显示器被提供并被设置为所述第一显示器仅由用户可视。第二显示器由不是用户的至少一个其他观察者可视。在一些实施例中，第二显示器对用户不可视。在一些实施例中，设置用于记录与第一显示器相对应的移动的传感器。至少一个控制器被配置为接收来自传感器的输入，并且至少部分地基于该输入向第一显示器和第二显示器提供图像，其中，所述输入表示用户、第一显示器和第二显示器中的至少一个的移动。通过类似的技术实现了附加的特征和优点，并且在本文中详细描述了其他实施例和方面，并且将其视为所要求保护的实施例的一部分。为了更好地理解具有优点和特征的实施例，请参考具体实施方式和附图。附图说明通过以下参考附图并通过非限制的方式描述的实施例和执行示例，本公开将被更好地理解和说明，在附图中：图1示意性示出根据本公开的一个或多个实施例的编码和解码系统的功能概述；图2示意性示出根据一个实施例的系统；图3示意性示出根据另一实施例的系统；图4示意性示出根据另一实施例的系统；图5示意性示出根据另一实施例的系统；图6示意性示出根据另一实施例的系统；图7示意性示出根据另一实施例的系统；图8示意性示出根据另一实施例的系统；图9示意性示出根据另一实施例的系统；图10示意性示出根据实施例的沉浸式视频呈现设备；图11示意性示出根据另一实施例的沉浸式视频呈现设备；图12示意性示出根据另一实施例的沉浸式视频呈现设备；图13示意性示出根据一个实施例的具有第一内部显示器和第二外部显示器的用户界面；图14提供了根据一个实施例的图13的实施例的更详细的视图；图15提供了图14的实施例的备选实施例；图16提供了根据另一实施例的具有视频投影仪的备选实施例；图17提供了根据另一实施例的具有智能移动设备的备选实施例；图18是根据一个实施例的VR/AR可穿戴设备的图示；图19是根据一个实施例的用于向用户和观察者提供多个透视图的方法的流程图表示；以及在可能的情况下，贯穿附图，相同的附图标记将用于表示相同或类似部件。具体实施方式将理解的是，本实施例的附图和说明书已经被简化，以示出有助于对本实施例进行更清楚的了解的相关元素，同时为了简明起见，省略了在典型的数字多媒体内容递送方法和系统中能找到的许多其它元素。然而，由于这些元素在本领域是公知的，本文中不提供对这些元素的详细讨论。本文的公开针对本领域技术人员已知的所有这些变化和修改。图1示意性示出根据一个或多个实施例的编码和解码系统的总体概述。图1的系统被配置为执行一个或多个功能。可以设置预处理模块300以准备用于由编码设备400进行编码的内容。预处理模块300可以执行多图像获取、合并所获取的公共空间中的多个图像(例如，通过使用例如但不限于等距形映射或立方体映射而映射到2D帧中对从3D球体到每个像素的方向进行编码的3D球体)。备选地，预处理模块300可以获取特定格式(例如，等矩形)的全向视频作为输入，并且对该视频进行预处理以将映射改变为更适合于编码的格式。取决于所获取的视频数据表示，预处理模块300可以执行映射空间改变。另一实现可以将多个图像组合成具有点云表示的公共空间。编码设备400以适合于传输和/或存储的形式来打包内容以由兼容解码设备700恢复。通常，尽管不严格要求，但是编码设备400提供一定程度的压缩，从而允许更有效地表示公共空间(即，使用较少存储器进行存储和/或使用传输所需的较少带宽)。在将3D球体映射到2D帧的情况下，2D帧实际上是可以由多个图像(或视频)编解码器中的任何一个进行编码的图像。在具有点云表示的公共空间的情况下，编码设备400可以例如通过八叉树分解来提供众所周知的点云压缩。在被编码之后，可以被编码为例如沉浸式视频数据的数据或3DCGI编码数据被发送到网络接口500，该网络接口500通常可以在任何网络接口中实现，例如存在于网关中。数据然后通过诸如互联网之类的通信网络550进行传输，但是可以预见任何其他网络。然后，经由网络接口600接收数据。可以在网关、电视、机顶盒、头戴式显示器(HMD)设备、沉浸式(投影)墙或任何沉浸式视频呈现设备中实现网络接口600。在接收之后，数据被发送到解码设备700。解码的数据然后由播放器800处理。播放器800针对呈现设备900准备数据，并且可以接收来自传感器的外部数据或用户输入数据。更确切地，播放器800准备将要由呈现设备900显示的视频内容的一部分。解码设备700和播放器800可以被集成在单个设备(例如，智能电话、游戏控制台、STB、平板电脑、计算机等)中。在另一实施例中，播放器800可以集成在呈现设备900中。各种类型的系统可以用于执行沉浸式显示设备的功能，以呈现沉浸式视频或交互式沉浸式体验(例如，VR游戏)。在图2至图9中示出了用于处理增强现实(AR)或虚拟现实(VR)内容的系统的实施例。这种系统设置有一个或多个处理功能，并且包括沉浸式视频呈现设备，该沉浸式视频呈现设备可以包括例如头戴式显示器(HMD)、平板电脑或智能电话，并且可以可选地包括一个或多个传感器。沉浸式视频呈现设备还可以包括在显示设备与执行处理功能的一个或多个模块之间的接口模块。表示处理功能可以集成到沉浸式视频呈现设备中，或者由一个或多个处理设备执行。这样的处理设备可以包括一个或多个处理器以及与沉浸式视频呈现设备通信的通信接口，例如无线或有线通信接口。处本文档来自技高网...

【技术保护点】
1.一种系统，包括：/n第一显示器和第二显示器，设置成使得所述第一显示器至少由用户可视，并且所述第二显示器由不是所述用户的至少一个其他观察者可视；以及/n至少一个处理器，被配置为接收来自传感器的输入，并且至少部分地基于所述输入，将图像提供给所述第一显示器和所述第二显示器，其中，所述输入表示所述用户、所述第一显示器和所述第二显示器中的至少一个的移动。/n

【技术特征摘要】
【国外来华专利技术】20180202 US 62/625,6201.一种系统，包括：
第一显示器和第二显示器，设置成使得所述第一显示器至少由用户可视，并且所述第二显示器由不是所述用户的至少一个其他观察者可视；以及
至少一个处理器，被配置为接收来自传感器的输入，并且至少部分地基于所述输入，将图像提供给所述第一显示器和所述第二显示器，其中，所述输入表示所述用户、所述第一显示器和所述第二显示器中的至少一个的移动。


2.一种方法，包括：
接收表示用户、第一显示器和第二显示器中的至少一个的移动的输入，其中，所述第一显示器被设置为至少由用户可视，并且所述第二显示器由不是所述用户的至少一个观察者可视；
至少部分地基于所述输入向所述第一显示器和所述第二显示器提供图像。


3.根据权利要求1所述的系统或根据权利要求2所述的方法，其中，所述第一显示器和所述第二显示器设置在壳体上，所述第一显示器在所述壳体的内部，所述第二显示器在所述壳体的外部。


4.根据权利要求1或3中任一项所述的系统或根据权利要求2至3所述的方法，其中，所述第一显示器或所述第二显示器的移动包括选择性的移动。


5.根据权利要求1或3至4中任一项所述的系统，还包括记录所述移动的传感器。


6.根据权利要求3至5中任一项所述的系统或根据权利要求3至5中任一项所述的方法，其中，所述壳体能够由所述用户穿戴，并且所述壳体的移动与所述用户的移动相对应。


7.根据权利要求...

【专利技术属性】
技术研发人员：威廉·雷德曼，
申请(专利权)人：交互数字CE专利控股公司，
类型：发明
国别省市：法国;FR