耦接到增强现实系统的隐私敏感的消费者照相机技术方案

增强现实显示设备包括用于增强现实显示设备的一个或多个部件的外壳，其中一个或多个部件包括多个传感器以捕获与用户的周围环境有关的信息，并且其中多个传感器中的一个传感器是基于图像的传感器，处理模块通信地耦接到外壳以处理从多个传感器检索的一组数据，其中处理模块包括选择性地允许数据上传到云的门控机构，以及可拆卸照相机可拆卸地附接到增强现实显示设备的外壳，以使得当可拆卸照相机附接到增强现实显示设备的外壳时，门控机构被打开以使得从可拆卸照相机检索的数据被上传到云。

A privacy sensitive consumer camera coupled to an augmented reality system

Augmented reality display device for augmented reality display one or more parts of the equipment shell, one or more components comprises a plurality of sensors to capture information about the surrounding environment and users, and one of a plurality of sensors in the sensor is the sensor image processing module is based on communication from housing to processing data from a group of multiple sensor retrieval, which includes processing module selectively allows data uploaded to the cloud control mechanism, and a removable camera detachably attached to the augmented reality display equipment shell, so that when the removable camera attached to the augmented reality display equipment shell, the gating mechanism is open to make removable camera from the retrieved data is uploaded to the cloud.

【技术实现步骤摘要】
【国外来华专利技术】耦接到增强现实系统的隐私敏感的消费者照相机
本公开涉及将一个或多个消费者照相机耦接到增强现实系统的系统和方法。
技术介绍
现代计算技术和显示技术已经促进了用于所谓“虚拟现实”体验或者“增强现实”体验的系统的发展，其中，数字再现的图像或者其部分以看起来是真实或者可感知为真实的方式呈现给用户。虚拟现实“VR”场景通常涉及数字或虚拟图像信息的呈现，而对于其它实际的真实世界视觉输入并不透明。增强现实“AR”场景通常涉及数字或虚拟图像信息的呈现，作为对用户周围的实际世界的可视化的增强。例如，参考图1，描绘了增强现实场景，其中，AR技术的用户看见以在背景中的人、树、建筑为特征的真实世界的公园状的设置以及实体平台1120。除了这些项以外，AR技术的用户也可以感知站在真实世界的平台1120上的机器人雕像1110，以及正在飞行的卡通式的头像角色2，即使这些元素(2、1110)在真实的世界中不存在。人类的视觉感知系统是非常复杂的，开发一项促进虚拟图像元素在其它虚拟或现实世界图像元素中的舒适的、感觉自然的、丰富的呈现的增强现实场景是极具挑战的。类似于图1所示的场景，需要增强现实(“AR”)系统显示相对于物理世界的一个或多个真实对象的虚拟内容。作为示例，如果穿戴着头戴式显示器的用户观看显示器上的三维(3D)对象的虚拟表示，并且围绕3D对象出现的区域走动，则可以对每个视点重新渲染该3D对象，给予用户他或她围绕占据实际空间的对象走动的感知。换句话说，AR系统必须知道现实世界的坐标并显示与现实世界相关的虚拟内容，以提供满足增强现实或虚拟现实体验。为此，头戴式AR显示系统(或头盔安装的显示器或智能眼镜等)被配置为捕获关于用户的周围环境的一组数据。例如，AR系统可以捕获捕获用户视场的一组图像。AR系统还可以包括一个或多个捕获姿势(例如，在空间中用户的位置和方向)的传感器，用于跟踪用户眼睛的聚散的眼睛跟踪照相机，惯性测量单元IMU和其它这样的数据捕获设备。同时，这些照相机和传感器向AR显示系统提供各种形式的输入，这反过来允许AR系统相对于现实世界的一个或多个对象准确且及时地向用户呈现虚拟内容。虽然这些照相机和传感器(以及向AR显示系统提供输入的其它设备)对于向用户提供真实的增强现实体验至关重要，但是由于收集这些类型的数据，与隐私和安全相关的各种关心可能会出现。AR显示系统的用户可以警惕在未经用户同意的情况下由AR设备捕获的图像的类型(例如，隐私时刻的图片、儿童的图片、裸体图片、机密事件、秘密图片等)。例如，AR显示系统的用户可呈现有年轻孩子，但是可具有会对未知捕获并传送给其它用户和/或AR技术的提供者的年轻孩子的图像的隐私关心。这些隐私挑战者对于大多数人来说是真实和敏感的问题，如果没有正确解决，可能具有阻止用户安全地使用AR显示设备的影响。因此，在使用AR或VR设备的同时，需要一种更好的解决方案来确保AR用户的隐私。
技术实现思路
本专利技术的实施例涉及用于促进对于一个或多个用户的虚拟现实和/或增强现实交互的设备、系统和方法。在一个方面中，增强现实显示系统包括用于增强现实显示系统的一个或多个部件的外壳，其中一个或多个部件包括至少一个空间光调制器以将与一个或多个虚拟图像相关联的光投射到用户，以及多个传感器以捕获与用户的周围环境有关的信息，并且其中多个传感器中的至少一个传感器是基于图像的传感器，通信地耦接到外壳以处理从多个传感器检索的一组数据的处理模块，其中处理模块包括选择性地允许从多个传感器检索的一组数据发送到移动平台的门控(gating)机构，以及可拆卸地附接到增强现实显示系统的外壳的可拆卸照相机，其中至少部分地基于是否检测到可拆卸照相机附接到增强现实显示系统的外壳，门控机构选择性地允许从多个传感器检索的一组数据穿过到移动平台。在一个或多个实施例中，当检测到可拆卸照相机附接到增强现实显示系统的外壳时，门控机构允许该组数据穿过到移动平台。在一个或多个实施例中，当未检测到可拆卸照相机附接到增强现实显示系统的外壳时，门控机构仅允许该组数据的部分穿过到移动平台。在一个或多个实施例中，从多个传感器检索的该组数据的至少一些对应于图像或视频数据。在一个或多个实施例中，增强现实显示系统还包括VPU，VPU从对应于从多个传感器检索的该组数据的一组图像中提取几何信息。在一个或多个实施例中，当未检测到可拆卸照相机附接到增强现实显示系统的外壳时，门控机构允许几何信息穿过到移动平台，但是防止该组图像穿过到移动平台。在一个或多个实施例中，当检测到可拆卸照相机附接到增强现实显示系统的外壳时，门控机构允许几何信息和当检测到可拆卸照相机附接到增强现实显示系统时所捕获的该组图像穿过到移动平台。在一个或多个实施例中，几何信息对应于与该组图像有关的姿势信息。在一个或多个实施例中，几何信息对应于与该组图像有关的2D或3D点。在一个或多个实施例中，几何信息对应于与该组图像有关的深度信息。在一个或多个实施例中，几何信息被发送到地图(map)数据库，地图数据库包括世界的真实对象的坐标信息，以使得虚拟内容相对于世界的真实对象被显示给用户。在一个或多个实施例中，VPU包括图像存储模块以存储通过多个传感器捕获的图像。在一个或多个实施例中，VPU包括几何存储模块以存储与通过多个传感器捕获的图像有关的几何信息。在一个或多个实施例中，即使当未检测到可拆卸照相机附接到增强现实显示系统的外壳时，门控机构允许几何信息穿过到移动平台。在一个或多个实施例中，增强现实显示系统还包括照相机存储模块，用于存储通过可拆卸照相机捕获的图像。在一个或多个实施例中，当未检测到可拆卸照相机附接到增强现实显示系统的外壳时，照相机存储模块不将图像发送到移动平台。在一个或多个实施例中，当检测到可拆卸照相机附接到增强现实显示系统的外壳时，照相机存储模块发送在检测到可拆卸照相机附接时所捕获的图像到移动平台。在一个或多个实施例中，可拆卸照相机包括指示器，其标志可拆卸照相机已经附接到增强现实显示系统的外壳。在一个或多个实施例中，指示器包括当可拆卸照相机已经附接到增强现实显示系统的外壳时打开的光。在一个或多个实施例中，指示器是物理打开或阻挡可拆卸照相机的透镜的快门。在一个或多个实施例中，可拆卸照相机是第三方照相机。在一个或多个实施例中，可拆卸照相机电附接到增强现实设备的外壳是电气装置。在一个或多个实施例中，可拆卸照相机机械地附接到增强现实设备的外壳是机械装置。在一个或多个实施例中，增强现实显示系统还包括电接触，电接触当可拆卸照相机附接到可拆卸照相机时完成电路，以检测可拆卸照相机已经附接到增强现实显示系统的外壳。在一个或多个实施例中，多个传感器包括IMU设备。在一个或多个实施例中，多个传感器包括眼睛跟踪设备。在一个或多个实施例中，多个传感器包括深度照相机。在一个或多个实施例中，多个传感器包括视场照相机。在一个或多个实施例中，多个传感器包括红外照相机。在另一方面中，一种用于显示增强现实的方法包括：通过空间光调制器向用户投射一个或多个虚拟图像，通过多个传感器捕获与用户周围环境有关的一组数据，其中该组数据包括图像，通过处理模块处理从多个传感器检索的该组数据，处理模块包括门控机构，该门控机构选择性地允许从多个传感器检索的该组数据发送到移动平本文档来自技高网...

【技术保护点】
一种用于显示增强现实的方法，包括：通过空间光调制器向用户投射一个或多个虚拟图像；通过多个传感器捕获与所述用户的周围环境有关的一组数据，其中，所述一组数据包括图像；通过处理模块处理从所述多个传感器检索的所述一组数据，所述处理模块包括选择性地允许从所述多个传感器检索的所述一组数据发送到移动平台的门控机构；检测可拆卸照相机是否附接到增强现实设备的外壳，其中，所述门控机构至少部分地基于是否检测到所述可拆卸照相机附接到所述增强现实显示系统的外壳，来选择性地允许从所述多个传感器检索的所述一组数据发送到所述移动平台。

【技术特征摘要】
【国外来华专利技术】2015.05.14 US 62/161,6651.一种用于显示增强现实的方法，包括：通过空间光调制器向用户投射一个或多个虚拟图像；通过多个传感器捕获与所述用户的周围环境有关的一组数据，其中，所述一组数据包括图像；通过处理模块处理从所述多个传感器检索的所述一组数据，所述处理模块包括选择性地允许从所述多个传感器检索的所述一组数据发送到移动平台的门控机构；检测可拆卸照相机是否附接到增强现实设备的外壳，其中，所述门控机构至少部分地基于是否检测到所述可拆卸照相机附接到所述增强现实显示系统的外壳，来选择性地允许从所述多个传感器检索的所述一组数据发送到所述移动平台。2.根据权利要求1所述的方法，还包括当检测到所述可拆卸照相机附接到所述增强现实显示系统的外壳时，所述门控机构允许所述一组数据穿过到所述移动平台。3.根据权利要求1所述的方法，还包括当未检测到所述可拆卸照相机附接到所述增强现实显示系统的外壳时，所述门控机构仅允许所述一组数据的部分穿过到所述移动平台。4.根据权利要求1所述的方法，其中，从所述多个传感器检索的所述一组数据的至少一些对应于图像或视频数据。5.根据权利要求1所述的方法，还包括通过VPU从与从所述多个传感器检索的所述一组数据对应的一组图像提取几何信息。6.根据权利要求5所述的方法，还包括当未检测到所述可拆卸照相机附接到所述增强现实显示系统的外壳时，所述门控机构允许所述几何信息穿过到所述移动平台。7.根据权利要求5所述的方法，还包括当检测到所述可拆卸照相机附接到所述增强现实显示系统的外壳时，所述门控机构允许所述几何信息和当检测到所述可拆卸照相机附接到所述增强现实显示系统时捕获的所述一组图像穿过到所述移动平台。8.根据权利要求5所述的方法，其中，所述几何信息对应于与所述一组图像有关的姿势信息。9.根据权利要求5所述的方法，其中，所述几何信息对应于与所述一组图像有关的2D点或3D点。10.根据权利要求5所述的方法，其中，所述几何信息对应于与所述一组图像有关的深度信息。11.根据权利要求5所述的方法，还包括将所述几何信息发送到地图数据...

【专利技术属性】
技术研发人员：G·R·布拉德斯基，
申请(专利权)人：奇跃公司，
类型：发明
国别省市：美国,US