遥现体验制造技术

本描述涉及在视频通信场景期间创建类似窗口的体验。一个示例可以包括包含了可引导的光偏转元件阵列的空间光偏转器。所述示例还可以包括相对于空间光偏转器被定位的楔设备。所述示例还可以包括被定位在楔设备的端部以接收所捕捉的光的相机。

Telepresence experience

This description concerns the creation of window like experiences during video communication scenarios. An example may include a spatial light deflector comprising an array of bootable light deflection elements. The example may also include a wedge device positioned relative to the spatial light deflector. The example may also include a camera positioned at the end of the wedge device to receive the captured light.

【技术实现步骤摘要】
【国外来华专利技术】遥现体验附图简述附图例示了本文档中所传达的概念的实现。所例示的实现的特征可通过参考以下结合附图的描述来更容易地理解。在可行的情况下，各附图中相同的附图标记被用来指代相同的元素。此外，每个附图标记的最左边的数字传达其中首次引入该附图标记的附图及相关联的讨论。图1-8示出根据本专利技术概念的一些实现的示例窗口-模拟场景或系统。图9示出了根据本专利技术概念的一些实现的示例窗口-模拟设备的部分剖切透视图。图10-13示出根据本专利技术概念的一些实现的窗口-模拟设备的示例的截面视图。图14示出了根据本专利技术概念的一些实现的示例窗口-模拟系统。图15示出了根据本专利技术概念的一些实现的示例窗口-模拟流程图。详细描述各设备便利于人们如何在面对面讨论中进行交互。人们可以以各种方式，例如语音、姿势、眼睛注视、他们如何面向彼此，等等来交流。各设备可能不能在远程场景中提供这样的特征。本专利技术涉及可以既呈现图像又捕捉图像的显示设备。例如，显示设备可以是一种平板数字显示器，其能够从该平板数字显示器处捕捉类似于由在该平板数字显示器之后的点所捕捉的图像的图像。当与类似但位于远程的伴随显示设备组合时，该显示设备可以将该用户看作一个玻璃面板(例如窗口)，但是当用户透过该显示设备查看时，该用户看到在世界的另一部分中的场景，反之亦然。为此，一些实现可以使用具有大面积的相机的束偏转面的可引导阵列的组合，所述相机具有低集光率(例如光线的相对角在通过设备的折射和/或反射期间通常被保留)。涉及这一类似窗口效果的场景的示例相对于图1-8被描述。用于实现类似窗口效果的示例设备配置相对于图9-13被描述。图1-8共同示出涉及类似窗口效果或窗口模拟的用例场景或系统100。该系统涉及第一或本地用户102(1)以及第二或远程用户102(2)。(为便于解释，在每个位置处仅仅示出了单个用户，但是该系统可以处理在给定位置处的多个用户)。第一设备104(1)与第一用户102(1)位于同处，而第二设备(例如远程伴随设备)104(2)与第二用户102(2)位于一处。出于解释的目的，该设备可以具有显示图像的正面106和相对的背面108。在所示的视图中，第一设备104(1)的正面106是可见的，而第二设备104(2)的背面108是可见的。(图10-13示出具有所指示的正面和背面这两者的设备的截面图)。窗口-模拟控制器110可以与相应的设备104协作地工作。出于简要的目的，图1-8的下述解释是针对第一用户102(1)描述的。然而，注意，类似的过程可以同时相对于第二用户102(2)发生。在图1中，关于第一用户102(1)相对于第一设备104(1)的眼睛相关信息可以被收集。眼睛相关信息可以涉及用户相对于第一设备的相对位置、从第一用户的眼睛到第一设备的距离和/或用户相对于第一设备查看的方向(例如注视方向)等等。在系统100中，眼睛相关信息由线112表示。注意，在这种情况中，使用了以用户的眼睛之间为中心的单条线。其它实现可为每个眼睛单独执行相同的过程以创建如用户所察觉的3D图像(例如左和右立体图像)。也需注意，如果多个用户看着设备104(1)，可为他们中的每个人确定一条(与线112)类似的线，或在3D图像的情况下为他们中的每个人确定两条线。在图2中，第一用户的眼睛相关信息可以在第二设备104(2)处被使用以确定为第一用户捕捉哪个光线。一种考虑这样做的方式是第一用户的模拟202。所述模拟以虚像形式被示出，因为其是出于解释的目的被提供。所述模拟可以包括模拟线112的线204。出于解释的目的，线204延伸穿过设备104(2)进入场景中(例如到第二用户102(2))。所述模拟可以被定位在第二设备之后(例如面向背面108)以模仿在第一设备104(1)的正面的第一用户的位置。这样，所述模拟的位置、从所述模拟到第二设备的距离以及所述模拟查看的方向可以由眼睛相关信息来定义。这样，被模拟的线204可以定义如果第一用户透过第二设备104(2)查看时他将看到的事物的中心。图3示出第一用户102(1)(例如用户的模拟202)透过第二设备104(2)的背面108将查看到什么的表示302。表示302以虚像形式被示出，因为在第二设备的背面上实际上并不存在图像。第二设备104(2)可以捕捉撞击到第二设备的正面的光，所述光将创建表示302的图像。关于该光的图像信息可以被传送给第一设备104(1)。从一个角度来看，线204可以被认为是从第一用户的眼睛发出的中心轴。所捕捉的光可以是在中心轴的角度α内的光，该光将撞击第一用户的眼睛。表示302可以被认为是撞击第二设备104(2)的正面的光的区域，所述光在角度α内并且如果它没有碰到第二设备104(2)其将撞击模拟202的眼睛。图4示出了呈现对应于图3的表示302的图像402的第一设备104(1)。第一设备可以基于从第二设备104(2)获得的图像信息生成所述图像。这样，图像402重新创建如果第一用户透过设备104(1)查看时他将看到什么，就如同他在与从第一设备的前方时相同的相对位置、距离和眼睛注视方向处透过设备104(2)的背面进行查看那样。图5示出第一用户102(1)的后续视图。此时，第一用户位于相同的相对位置并离第一设备104(1)相同的距离，但是他将他的注视如由线502所表示地进行移位(与图1的线112相比较而言)。该经更新的眼睛相关信息可以被发送给第二设备104(2)。图6示出经更新的模拟202和线204以反映来自第一设备104(1)的新的眼睛相关信息。图7示出在第二设备104(2)处的经更新的表示302。表示302可以表示如果第一用户102(1)透过第一设备104(1)进行查看并在第二设备104(2)之外时将在他的眼睛中终止的光线。关于该表示302的图像信息可以被传送给第一设备104(1)。图8示出在第一设备104(1)上基于表示302生成的图像402。正如图4中，向第一用户102(1)呈现与他相对于第一设备的定位、位置和眼睛注视相对应的图像402，即使用于该图像的信息在第二设备104(2)处被收集。从一个角度来看，图1-8示出可以如何收集相对于第一设备的眼睛相关信息。该眼睛相关信息可以被用于捕捉在第二设备处将以其它方式穿过该第二设备并到达由该眼睛相关信息所定义的点的光。关于所捕捉的光的图像信息可以被发送给第一设备。第一设备可以从所述图像信息中生成可被第一用户看见但对于其它用户可能不可见(例如由于他们的眼睛不在与用户的眼睛相同的位置处)的图像。该过程可以同时针对与第二设备104(2)相关联的第二用户进行重复。图9示出设备104(第一设备104(1)或第二设备104(2))的正面106的部分剖视图。出于简要的目的，仅仅示出了单个设备，但如相对于图1-8所解释的，该设备可以与另一个远程伴随设备协作地工作。在该示例中，设备包括显示器或显示屏902、空间光偏转器(例如光引导元件)904、楔设备906和背光908。在这种情况中，设备104还包括窗口-模拟控制器110和一对红、绿、蓝+深度(RGBD)相机910(1)和910(2)。图10-13是示出图9所示的基本配置的变型的截面图。最初，窗口-模拟控制器110可以利用RGBD相机910(1)和910(2)来确定眼睛相关信息。例如，通本文档来自技高网...

【技术保护点】
一种系统，包括：具有前和背表面的显示器；抵靠所述显示器的所述背表面并置的空间光偏转器；抵靠所述空间光偏转器被并置的楔设备；与所述楔设备相关联的相机；以及被配置为接收关于在远程显示器的前方的远程用户的信息的窗口‑模拟控制器，所述信息包括所述远程用户相对于所述远程显示器的位置以及所述远程用户正在看着的方向，所述窗口‑模拟控制器被配置为模拟所述远程用户位于所述显示器之后的位置处并以所述方向看着所述显示器，所述窗口‑模拟控制器被配置为标识将穿过所述显示器并对于所模拟的远程用户可见的光的区域，并使得所述空间光偏转器将所述光的区域引导入所述楔设备中并使得所述相机捕捉来自所述楔设备的所述光的区域的图像，所述窗口‑模拟控制器被进一步配置成使得所述图像被发送到所述远程显示器。

【技术特征摘要】
【国外来华专利技术】2014.10.10 US 14/512,2961.一种系统，包括：具有前和背表面的显示器；抵靠所述显示器的所述背表面并置的空间光偏转器；抵靠所述空间光偏转器被并置的楔设备；与所述楔设备相关联的相机；以及被配置为接收关于在远程显示器的前方的远程用户的信息的窗口-模拟控制器，所述信息包括所述远程用户相对于所述远程显示器的位置以及所述远程用户正在看着的方向，所述窗口-模拟控制器被配置为模拟所述远程用户位于所述显示器之后的位置处并以所述方向看着所述显示器，所述窗口-模拟控制器被配置为标识将穿过所述显示器并对于所模拟的远程用户可见的光的区域，并使得所述空间光偏转器将所述光的区域引导入所述楔设备中并使得所述相机捕捉来自所述楔设备的所述光的区域的图像，所述窗口-模拟控制器被进一步配置成使得所述图像被发送到所述远程显示器。2.如权利要求1所述的系统，其特征在于，所述空间光偏转器包括能独立控制的电润湿棱镜阵列。3.如权利要求1所述的系统，其特征在于，所述显示器被实现为透明有机发光二极管(OLED)显示器。4.如权利要求1所述的系统，其特征在于，所述系统被实现在单个设备上。5.如权利要求1所述的系统，其特征在于，所述远程用户的所述位置包括所述远程用户的左眼和右眼者的每一者的不同位置，并且其中所述窗口-模拟控制器被配置为执行对所述左眼的模拟以及随后对所述右眼的模拟以捕捉一对立体图像。6.如权利要求1所述的系统，其特征在于，还包括被定位以感测所述显示器的前方的空间的深度相机，所述窗口-模拟控制器被配置为处理来自所述深度相机的信号以标识所述用户的眼睛相对于所述显示器的前方的位...

【专利技术属性】
技术研发人员：A·R·L·特拉维斯，A·乔治欧，
申请(专利权)人：微软技术许可有限责任公司，
类型：发明
国别省市：美国,US