三维遥现系统技术方案

一种示例遥现终端包括透镜显示器、图像传感器、红外发射器和红外深度传感器。所述终端可以使用由红外发射器发射并由图像传感器捕获的可见光来确定图像数据，并且使用由红外深度传感器捕获的红外光来确定深度数据。所述终端还可以将深度数据和图像数据传达到远程的遥现终端，并接收远程图像数据和远程深度数据。所述终端还可以基于能够从第一观看位置观看的远程图像数据使用透镜显示器生成第一显示图像，并且基于能够从第二观看位置看到的远程图像数据和远程深度数据使用透镜显示器生成第二显示图像。

【技术实现步骤摘要】
【国外来华专利技术】三维遥现系统相关申请的交叉引用本申请要求在2016年9月9日提交的名称为THREE-DIMENSIONALTELEPRESENCESYSTEM(三维遥现系统)的美国临时申请No.62/385,685的优先权，其全部内容通过引用合并于此。
技术介绍
诸如视频会议系统之类的会议系统被用于各种设置中，以便为参与者提供进行虚拟会议而无需共处的机会。例如，视频会议系统可以提供显示器、通信链路、扬声器和麦克风，它们允许参与者查看远程参与者并与之通信。因为参与者可以在他们说话时看到彼此，所以视频会议系统可以提供比单独的书面或口头交流更好的对于所讨论的主题的理解。这样的视频会议系统还可以提供更容易的会议安排，因为并非所有参与者都需要共处。此外，视频会议系统可以通过消除旅行的需要来减少资源(例如，时间和金钱)浪费。传统的视频会议系统通常包括通信系统(例如，电话或VoIP系统等)、标准视频监视器(例如，CRT、等离子、HD、LED或LCD显示器)、相机、麦克风和扬声器。
技术实现思路
以下公开的实施方式涉及视频会议和遥现系统。至少一些实施方式提供三维遥现，而不使用头戴式显示器、耳机和/或任何其他类型的物理累赘。在本文档来自技高网...

【技术保护点】
1.一种遥现终端，包括：显示器，所述显示器包括设置在像素网格前面的微透镜阵列；图像传感器；红外发射器；红外深度传感器；处理设备；以及存储器，所述存储器存储指令，所述指令在被执行时使所述处理设备执行操作，所述操作包括：基于所述图像传感器捕获的可见光确定图像数据；基于由所述红外发射器发出并由所述红外深度传感器捕获的红外光确定深度数据；将所述深度数据和所述图像数据传达到远程的遥现终端；接收远程图像数据和远程深度数据，所述远程图像数据和远程深度数据源自远程的遥现终端；使用能够从第一观看位置通过所述微透镜阵列观看的所述像素网格的第一像素子集，基于所述远程图像数据生成第一显示图像；以及使用能够从第二观看位...

【技术特征摘要】
【国外来华专利技术】2016.09.09 US 62/385,6851.一种遥现终端，包括：显示器，所述显示器包括设置在像素网格前面的微透镜阵列；图像传感器；红外发射器；红外深度传感器；处理设备；以及存储器，所述存储器存储指令，所述指令在被执行时使所述处理设备执行操作，所述操作包括：基于所述图像传感器捕获的可见光确定图像数据；基于由所述红外发射器发出并由所述红外深度传感器捕获的红外光确定深度数据；将所述深度数据和所述图像数据传达到远程的遥现终端；接收远程图像数据和远程深度数据，所述远程图像数据和远程深度数据源自远程的遥现终端；使用能够从第一观看位置通过所述微透镜阵列观看的所述像素网格的第一像素子集，基于所述远程图像数据生成第一显示图像；以及使用能够从第二观看位置通过所述微透镜阵列观看的所述像素网格的第二像素子集，基于所述远程图像数据和所述远程深度数据生成第二显示图像。2.根据权利要求1所述的遥现终端，其中，生成所述第一显示图像和所述第二显示图像以具有基于所接收的深度数据模拟视差的差异。3.根据权利要求2所述的遥现终端，其中，所述指令还使所述处理设备执行包括确定所述遥现终端的用户的位置的操作。4.根据权利要求3所述的遥现终端，其中，所述遥现终端的所述用户的所述位置是基于所述深度数据确定的。5.根据权利要求3所述的遥现终端，其中，所述遥现终端的所述用户的所述位置是基于所述图像数据确定的。6.根据权利要求3所述的遥现终端，其中，生成所述第一显示图像和所述第二显示图像以具有基于所述用户的所确定的位置来模拟视差的差异。7.根据权利要求3至6中任一项所述的遥现终端，其中，所述指令还使所述处理设备执行包括以下的操作：使用所述远程图像数据和所述远程深度数据以及所述遥现终端的所述用户的所确定的位置在所述显示器上生成三维立体图像。8.根据权利要求1所述的遥现终端，其中，所述指令还使所述处理设备执行包括以下的操作：在第一方向上生成所述第一显示图像的第一部分，并在第二方向上生成所述第二显示图像的第二部分。9.根据权利要求8所述的遥现终端，其中，所述微透镜阵列中的微透镜被配置为跨一个或多个角度发出光和/或在一个或多个不同方向上显示不同颜色像素值。10.根据权利要求8或9所述的遥现终端，其中，所述第一方向是通过从多个像素中选择用于显示所述第一显示图像的一部分的第一像素来确定的，并且所述第二方向是通过从所述多个像素中选择用于显示所述第二显示图像的一部分的第二像素来确定的。11.根据权利要求1所述的遥现终端，其中，所述指令还使所述处理设备执行包括以下的操作：基于飞行时间方法确定所述深度数据，所述飞行时间方法测量由所述红外发射器发出的第一红外光与由所发出的第一红外光的路径中的对象反射并由所述红外深度传感器捕获的第二红外光之间的相位偏移。12.根据权利要求1所述的遥现终端，还包括：麦克风组件，所述麦克风组件包括位于所述显示器的第一侧的第一麦克风和位于所述显示器的第二侧的第二麦克风；以及扬声器组件，所述扬声器组件包括位于所述显示器的所述第一侧的第一扬声器和位于所述显示器的所述第二侧的第二扬声器；其中，所述指令还使所述处理设备执行包括以下的操作：使用所述麦克风组件捕获定向音频数据；将所述定向音频数据传送到所述远程终端；从所述远程终端接收远程定向音频数据；以及基于所述远程定向音频数据使用所述扬声器组件输出音频。13.根据权利要求12所述的遥现终端，其中，所述麦克风组件包括超过两个的麦克风。14.根据权利要求1所述的遥现终端，其中，所述遥现终端包括相机组件，所述相机组件包括至少一个相机单元，所述至少一个相机单元包括所述图像传感器、所述红外发射器和所述红外深度传感器。15.根据权利要求14所述的遥现终端，其中，所述相机单元位于所述显示器后面，并且所述显示器是透明的。16.根据权利要求15所述的遥现终端，其中，所述显示器能够在关闭状态和照明状态之间切换，并且其中，所述指令还使所述处理设备执行包括以下的操作：使可见光和红外光的捕获与所述显示器的所述关闭状态同步。17.根据权利要求16所述的遥现终端，其中，所述微透镜阵列中的至少一些微透镜由第一材料制成，并且所述微透镜阵列中的所述微透镜中的至少一些微透...

【专利技术属性】
技术研发人员：丹尼尔·戈德曼，杰森·劳伦斯，安德鲁·胡伊博斯，安德鲁·伊安·拉塞尔，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：美国,US