像素显示器的色彩和强度调制的使用制造技术

本公开涉及像素显示器的色彩和强度调制的使用，具体说，涉及利用具有多元显示器、摄像头和控制器的移动设备来确定目标物体的3D模型的方法和系统。多元显示器被配置为产生光场。光场的至少一部分从目标物体反射。摄像头被配置为基于从目标物体反射的光场的部分捕获多个图像。控制器被配置为基于图像确定目标物体的3D模型。3D模型包括关于目标物体的三维形状和色彩信息。在一些实施例中，光场可以包括特定的光图案、光谱内容和其它形式的调制光/结构光。

【技术实现步骤摘要】
像素显示器的色彩和强度调制的使用
本公开涉及像素显示器的色彩和强度调制的使用。
技术介绍
在计算机图形学中，三维(3D)建模涉及产生物体的3D表面的表示。该表示可以称为3D物体数据模型，或简称为3D模型，并可以经由3D渲染(render)而被渲染为或显示为二维图像，或者可以被显示为三维图像。3D物体数据模型可以利用通过诸如三角形、线和曲面等的各种几何实体连接的、在3D空间中点的集合来表示3D物体。存在利用点云和几何形状产生3D物体数据模型的各种技术。
技术实现思路
在第一方面中，提供一种移动设备。该移动设备包括多元显示器、摄像头和控制器。所述多元显示器被配置为产生光场。光场的至少一部分从目标物体反射。所述摄像头被配置为基于从目标物体反射的光场的一部分捕获多个图像。所述摄像头还被配置为同步于对光场的至少一次调制来捕获多个图像。控制器被配置为基于多个图像接收目标物体的3D模型。3D模型包括关于目标物体的三维形状和色彩信息。控制器还被配置为基于3D模型确定目标物体的形状、目标物体的外观和目标物体的材料中的至少一个。在第二方面中，提供一种方法。该方法包括用移动设备照明目标物体。移动设备包括多元显示器和摄像头。多元显示器被配置为产生调制光场。调制光场照明目标物体。该方法包括利用摄像头捕获目标物体的多个图像。多个图像的捕获被配置为同步于对调制光场的至少一次调制。该方法还包括基于多个图像接收目标物体的3D模型。3D模型包括关于目标物体的三维形状和色彩信息。另外，该方法包括基于3D模型确定目标物体的形状、目标物体的外观和目标物体的材料中的至少一个。在第三方面中，提供一种非瞬时计算机可读介质。该非瞬时计算机可读介质包括计算设备可执行以使计算设备执行功能的指令，该功能包括用计算设备照明目标物体。计算设备包括多元显示器和摄像头。多元显示器被配置为产生光场。光场照明目标物体。该功能包括利用摄像头捕获目标物体的多个图像。功能还包括基于多个图像接收目标物体的3D模型。3D模型包括关于目标物体的三维形状和色彩信息。另外，功能包括基于3D模型确定目标物体的形状、目标物体的外观和目标物体的材料中的至少一个。前述的
技术实现思路
仅是示例性的且不是旨在任何形式的限制。除了上述的示例性的方面、实施例和特征之外，参考图和下面详细的描述，更多的方面、实施例和特征将变得明显。【附图说明】图1A是依照示例实施例的服务器系统的功能方框图；图1B是依照示例实施例的分布式计算架构的功能方框图；图1C是依照示例实施例的计算设备的功能方框图；图1D是依照示例实施例的基于云的服务器系统的功能方框图；图1E是依照不例实施例的计算机程序广品的不意图；图2A是依照示例实施例的移动设备的功能方框图；图2B-2D依照示例实施例展示了移动设备的前视图、侧视图和后视图；图3A依照示例实施例示出了利用移动设备捕获目标物体的图像的场景；图3B依照示例实施例示出了利用移动设备捕获目标物体的图像的场景；图3C依照示例实施例示出了利用移动设备捕获目标物体的图像的场景；图3D依照示例实施例示出了利用移动设备捕获目标物体的图像的场景；图4是依照示例实施例的方法的流程图。【具体实施方式】在下面的详细描述中，参考了构成其一部分的附图。在附图中，类似的标记通常标识类似的组件，除非上下文给出相反指示。在详细描述和图中描述的示例性实施例不是意图进行限制。在不脱离这里提出的主题的精神或范围的情况下，可以使用其它的实施例，也可以做出其它改变。将很容易理解，本公开的方面，如这里一般描述的和在图中示出的，可以以很多种不同的配置来安排、替代、组合或分开，所有这些都在本文的构想之内。这里公开的示例实施例涉及利用从移动设备的多元(mult1-element)显示器产生的光场照明(illuminating)目标物体；基于从目标物体反射的光场的部分、利用摄像头(camera)捕获多个图像；以及基于图像确定目标物体的3D模型。这里公开的一些方法可以通过移动设备部分地或全部地实施，可以有或没有移动设备用户的交互。取决于特定的实施例，移动设备可以表示平板计算机、膝上型计算机、智能电话、无线蜂窝式电话或任何其它的移动计算设备。在这些示例中，移动设备的多元显示器可以被用于照明目标物体。目标物体可以是在移动设备上的摄像头的视场内的任何物体。在一些实施例中，多元显示器可以提供包括白光和/或有色光的光场。附加地或可替换地，多元显示器可以从多元显示器的不同部分产生光，以便从不同的角度提供对目标物体的照明(lighting)。可以对多元显示器产生的光场进行其它调制(如强度、空间的、色彩、偏振等)。当光场的至少一部分正在照明目标物体时，摄像头可以捕获目标物体以及从目标物体反射的光场的部分的图像。基于捕获的图像，可以确定3D模型。3D模型可以包括关于目标物体的三维形状和色彩信息。除了目标物体的几何范围(extents)和色彩之外，三维形状和色彩信息还可以包括比如关于目标物体的照明信息(目标物体表面的亮度和反射率)的更多的元素。可选地，可以通过移动设备发送基于3D模型的搜索查询。搜索查询可以是为了特定的目的(如，为了搜索目标物体的价格和可以购买目标物体的位置)，或者搜索查询可以是一般性的(如，为了一般地提供关于目标物体的更多信息)。移动设备还可以可选地接收搜索查询结果。搜索查询结果可以，例如，包括来自服务器的响应，该响应指示关于目标物体和/或与目标物体类似的物体的更多信息。搜索查询结果可以附加地或可替换地包括获得目标物体的另外的图像的建议。这里公开的方法的部分可以部分地通过服务器实施。在示例性实施例中，服务器可以接收包括目标物体的3D模型的搜索查询(如，来自移动设备的搜索查询)。3D模型可以基于目标物体的多个图像，并且3D模型可以包括关于目标物体的三维形状和色彩信息。可以在第一比较中将3D模型与形状搜索数据库进行比较。服务器可以基于第一比较产生搜索查询结果。搜索查询结果可以包括关于目标物体的信息、关于与目标物体类似的一个或多个物体的信息和/或获得目标物体的更多图像的建议。服务器可以发送搜索查询结果(例如，到移动设备)。附加地或可替换地，(例如，在基于云的服务器中的)一个或多个服务器可以执行目标物体的3D模型的确定中的一些或全部。例如，移动设备可以捕获目标的多个图像。图像可以被发送到服务器，且服务器可以确定目标物体的3D模型。3D模型可以接着被发送到移动设备并被移动设备接收。在本公开的上下文内可以有服务器和移动设备之间的其它交互。这里还描述了移动设备。除了其他元件之外，移动设备可以包括多元显示器、摄像头和控制器。多元显示器可以是LCD显示器或本领域已知的其它任何的多像素阵列显示器。多元显示器可以被配置为提供可以照明目标物体的光场。光场的一部分可以从目标物体反射。摄像头可以被配置为基于从目标物体反射的光场的部分获得目标物体的多个图像。控制器可以被配置为基于图像确定目标物体的3D模型。3D模型可以包括关于目标物体的三维形状和色彩信息。可选地，控制器还可以被配置为基于3D模型发送搜索查询并且也接收搜索查询结果。多元显示器还可以被配置为显示3D模型的渲染表示以及关于3D模型的其它信息。这里还公开了具有存储的指令的非瞬时计算机可读介本文档来自技高网...

【技术保护点】
一种移动设备，包括：多元显示器，其中该多元显示器被配置为产生光场，其中该光场的至少一部分从目标物体反射；摄像头，其中该摄像头被配置为基于从目标物体反射的光场的部分捕获多个图像，并且被配置为与对光场的至少一次调制同步地捕获所述多个图像；以及控制器，其中该控制器被配置为基于所述多个图像接收目标物体的3D模型，其中该3D模型包括关于目标物体的三维形状和色彩信息，其中该控制器还被配置为基于3D模型确定目标物体的形状、目标物体的外观和目标物体的材料中的至少一个。

【技术特征摘要】
2012.07.25 US 61/675,525;2012.10.10 US 13/648,3931.一种移动设备，包括: 多元显示器，其中该多元显示器被配置为产生光场，其中该光场的至少一部分从目标物体反射； 摄像头，其中该摄像头被配置为基于从目标物体反射的光场的部分捕获多个图像，并且被配置为与对光场的至少一次调制同步地捕获所述多个图像；以及 控制器，其中该控制器被配置为基于所述多个图像接收目标物体的3D模型，其中该3D模型包括关于目标物体的三维形状和色彩信息，其中该控制器还被配置为基于3D模型确定目标物体的形状、目标物体的外观和目标物体的材料中的至少一个。2.根据权利要求1所述的移动设备，其中，控制器还被配置为: 发送搜索查询，其中该搜索查询包括3D模型；以及 接收搜索查询结果。3.根据权利要求1所述的移动设备，还包括投影仪，其被配置为提供朝向目标物体的第二光场。4.根据权利要求1所述的移动设备，其中多元显示器包括多个发光二极管。5.根据权利要求1所述的移动设备，其中光场包括点阵列、条带阵列、栅格图案、同心圆图案、爱里斑和干涉图案中的至少一个。6.根据权利要求1所述的移动设备，其中光场被配置为相比于环境光源提供入射到目标物体上的大部分光子。7.根据权利要求1所述的移动设备，其中移动设备包括第一面和与第一面相对的第二面，其中多元显示器和摄像头位于第一面上。8.根据权利要求1所述的移动设备，其中控制器被配置为调制多元显示器使得光场展示至少一次调制，并且其中摄像头被配置为与光场的至少一次调制同步地捕获多个图像。9.根据权利要求1所述的移动设备，其中光场的至少一次调制包括改变光场的色彩内容。10.根据权利要求9所述的移动设备，其中控制器还被配置为基于光场的色彩内容和目标物体的多个图像确定目标物体的材料。11.根据权利要求1所述的移动设备，其中光场的至少一次调制包括改变光场的发光强度。12.根据权利要求1所述的移动设备，还包括耦合到多元显示器的光调节器，其中光调节器被配置为调节多元显示器产生的光。13.根据权利要求12所述的移动设备，其中光调节器包括栅格、光栅和衍射光学元件中的一个或多个。14.根据权利要求1所述的移动设备，还包括机动安装架，其中移动设备被配置为固定地附着于机动安装架，并且其中控制器被配置为控制机动安装架，以使得在不同的视场之间移动移动设备，其中摄像头还被配置为从不同的视场捕获多个图像，并且其中控制器还被配置为基于来自不同视场的多个图像确定目标物体的3D模型。15.根据权利要求1所述的移动设备，其中...

【专利技术属性】
技术研发人员：JJ库夫纳，A波尔索希，C加普尔，R西克曼，
申请(专利权)人：谷歌公司，
类型：发明
国别省市：