一种用于增强由光源照射并且具有关联的深度和纹理信息的3D图像的设备包含从深度信息中生成具有表面网格部分的表面网格。根据纹理信息确定对应于表面网格部分的纹理部分。纹理部分基于它们的颜色强度进行排序，并且调整一个或多个光源的特性以更改排序的纹理部分的颜色强度以便由此产生增强图像。
【技术实现步骤摘要】
【国外来华专利技术】
本专利技术一般涉及三维数字图像的增强。
技术介绍
三维(3D)立体相机以及相关深度感测方法连同3D打印机和3D显示装置的激增已经产生了关于3D图像的处理和增强的新的一组挑战。更具体地说，捕获的3D图像的质量可受在捕获时存在的次优照明条件(诸如眩光或暗光区域)的影响。尽管标准计算机图形方法可用于增强3D图像并改变照明效果，但假如提供了来自图像中对象表面的3D深度信息，则当前没有可增强此类捕获图像以改变3D照明或者减少或移除次优照明条件的影响的适合的标准化方法。存在可在图像捕获期间使用的各种技术，其还捕获与图像纹理信息关联的深度信息。处理深度信息以产生具有定义图像内3D对象形状的三维(3D)多边形网格的点云或深度图。在处理之后，深度信息可用几种格式表示，包含但不限于，三角形或四边形的3D空间或3D表面网格中的X、Y和Z点云。表示深度信息的其它格式可包含XML编码格式、文本格式或图形格式，诸如OpenGL。【附图说明】图1示出了按照实施例施加了表面、照明和纹理的示范3D多边形网格。图2示出了按照实施例被细分成多个三角形表面的球体的示范表面网格。图3是示出了按照实施例用于增强3D图像的方法的过程流程图； 图4A-4C —般图示了按照实施例用于光、观察器/相机、反射、镜面高亮和表面法线的光向量。图5是示出了按照实施例存储用于增强3D图像的代码的有形非暂时性计算机可读介质； 图6是按照实施例可使用的电子装置的框图； 图7是按照实施例使用多边形的3D网格和对应纹理编码图像的示范系统的框图；以及图8是按照实施例可实施图7系统的小形状因子装置的示意图。贯穿本公开和附图使用相同的编号来提及相似的组件和特征。100系列中的编号指的是最初在图1中发现的特征；200系列中的编号指的是最初在图2中发现的特征；以此类推。【具体实施方式】如上面一般讨论的，当3D图像通过3D立体相机、深度传感器、多视图相机、立体卫星、其它深度捕获成像装置或深度捕获方法(诸如例如，同时定位与映射(SLAM)或光(通常是激光)检测和测距的方法)捕获时，深度信息可与关联的文本信息一起被提取和处理。例如，结构化光图案可被广播到场景中，并且当结构化光图案随距离改变时，可通过检测图案的大小来重构深度信息。其它示例中，飞行时间(TOF)传感器可用于通过测量红外光从传感器到对象并且回来的往返飞行时间来收集信息。提取的深度信息可与关联的纹理信息一起编码，并以任何媒体CODEC格式使用或用新编码解码器格式编码。术语图像纹理和纹理可同义地用于描述表示表面上颜色的2D图像阵列。使用计算机图形技术，图像纹理是纹理映射的。纹理映射是将图像安在含有表面几何图形的多边形网格上的过程。因而，在纹理映射期间，一组纹理在几何上安在多边形网格上，并在其上弯曲，类似于胶片在不规则表面伸展并粘住表面。用这种方式，表面几何图形被表示为与表面上实际颜色或图像纹理分开的多边形网格。进一步说，术语表面网格部分、表面补片、表面网格、表面多边形和多边形补片可互换使用，以根据连接到定义在实施例中所示出的整个表面的网格中的三角形、四边形或其它多边形来描述表面几何图形。例如，图2图示了表面几何形状的三角形网格表示。通过采用通过将表面几何图形与表面颜色或图像纹理分开的上面描述的图像表示，提供的本技术可使用每个图像纹理的向量分析和颜色空间强度排序来恢复和确定原始场景中的原始光源定位向量和光源颜色。本技术还可使用通过减去或改变原始照明并将具有新颜色的新光源添加到再现中，在随后再现中改变场景中的照明。如本文所描述的，术语图像和场景可互换使用。使用现在已知的或将来开发的方法，提取的深度信息足以使能够创建3D表面网格或深度图，其由3D点、表面向量或几何形状(诸如例如三角形、四边形等)构成。然而，深度信息和关联的图像纹理信息的格式未被标准化。缺乏发送深度信息和关联的图像纹理信息的标准化方法可阻止深度信息在各种应用中的使用，诸如使用照明信息允许场景中的基于深度的照明校正或增强。因而，本文描述的实施例涉及使用标准化的深度图格式和关联的纹理信息增强3D图像内的照明信息，其可使用图形处理单元和标准计算机图形方法(诸如openGL或Microsoft? DirectX?)在标准计算系统中再现多边形网格和关联的图像纹理进行再现。标准化深度图格式和纹理信息可以任何媒体CODEC格式使用，或用新编码解码器格式编码。通过使3D深度图能够包含网格中以标准化格式的每个三角形或四边形的光源颜色强度排序，可对图像或场景进行色度调整。本领域技术人员将认识到，给定使用本专利技术的方法进行的表面颜色强度排序和光源确定，标准计算机图形方法可用于对纹理化的3D多边形网格进行无限制的照明调整，本专利技术的方法可实施在标准计算机系统上，诸如平板、电话、安装在眼睛上的显示计算机、膝上型或台式系统。从而，可对3D深度图像以及对应纹理进行照明调整。在以下说明书和权利要求书中，可使用术语“耦合”和“连接”连同它们的派生词。应该理解，这些术语不打算作为彼此的同义词。而是，在具体实施例中，“连接”可用于指示两个或更多元素彼此直接物理接触或电接触。“耦合”可意味着两个或更多元素直接物理接触或电接触。然而，“耦合”也可意味着，两个或更多元素彼此不直接接触，但仍彼此合作或交互。—些实施例也可用硬件、固件和软件中的一个或组合来实现。一些实施例也可实现为存储在机器可读介质上的指令，其可由计算平台读取和执行以执行本文描述的操作。机器可读介质可包含用于存储或传送以由机器(例如计算机)可读的形式的信息的任何机制。例如，机器可读介质可包含只读存储器(ROM);随机存取存储器(RAM);磁盘存储介质；光存储介质；闪存装置；或电、光、声或其它形式的传播信号(例如载波、红外信号、数字信号)或传送和/或接收信号的接口，等等。实施例是实现或示例。在说明书中提到“实施例”、“一个实施例”、“一些实施例”、“各种实施例”或“其它实施例”意味着结合这些实施例描述的具体特征、结构或特性被包含在本专利技术的至少一些实施例中，但不一定包含在所有实施例中。“实施例”、“一个实施例”或“一些实施例”的各种出现不一定都指的是相同实施例。来自实施例的元素或方面可与另一实施例的元素或方面组合。并不是本文描述和图示的所有组件、特征、结构、特性等都需要包含在具体实施例或多个实施例中。如果说明书声称例如“可以”、“可能”、“能”或者“能够”包含组件、特征、结构或特性，则不要求包含那个具体组件、特征、结构或特性。如果说明书或权利要求书提到“一”元素，则那不意味着仅有一个元素。如果说明书或权利要求书提到“附加”元素，则那不排除存在多于一个的附加元素。要指出的是，尽管已经参考具体实现描述了一些实施例，但根据一些实施例，其它实现也是有可能的。此外，在附图图示和/或在本文描述的电路元素或其它特征的布置和/或次序不必按图示的和描述的具体方式布置。根据一些实施例，许多其它布置也是有可能的。在附图中示出的每个系统中，元素在一些情况下各可具有相同附图标记或不同附图标记，以暗示所表示的元素可能不同和/或类似。然而，元素可足够灵活以具有不同实现，并且与本文示出或描述的一些或所有系统工作。附图中示出的各种元素可以相同或不同。哪个被称为第本文档来自技高网...
【技术保护点】
一种用于增强3D图像的设备，所述3D图像具有与之关联的深度和纹理信息，所述设备包括：用于至少部分根据所述深度信息生成具有表面网格部分的3D网格的逻辑；用于至少部分根据所述纹理信息确定对应于所述表面网格部分的纹理部分的逻辑；用于至少部分根据所述纹理部分的颜色强度将所述纹理部分以及对应表面网格部分进行排序的逻辑；以及用于调整一个或多个光源的特性以更改所述颜色强度排序的纹理部分中的一个或多个的所述颜色强度以便由此产生增强图像的逻辑。
【技术特征摘要】
【国外来华专利技术】...
【专利技术属性】
技术研发人员：斯科特·A·克里格，
申请(专利权)人：英特尔公司，
类型：发明
国别省市：美国;US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。