用于多视点降噪和高动态范围的系统和方法技术方案

公开了用于多视点降噪和高动态范围的系统和方法。本公开涉及可以改进和/或修改通过使用多视点图像捕获系统捕获到的图像的方法和系统。在示例实施例中，经由多视点图像捕获系统来捕获连拍图像数据。所述连拍图像数据可以包括至少一个图像对。基于至少一个纠正单应性函数来使所述至少一个图像对对齐。基于所述图像对的所述相应图像之间的立体视差来使所述至少一个对齐的图像对变形。然后堆叠所述变形和对齐的图像，并且应用去噪算法。可选地，可以将高动态范围算法应用于所述对齐、变形、且去噪的图像中的至少一个输出图像。

System and method for multi-view noise reduction and high dynamic range

【技术实现步骤摘要】
用于多视点降噪和高动态范围的系统和方法本申请是分案申请，原案的申请号是201680050125.2，申请日是2016年11月30日，专利技术名称是“用于多视点降噪和高动态范围的系统和方法”。相关申请的交叉引用本申请要求2015年12月7日提交的美国专利申请第14/961,102号的优先权，该案以引用的方式全部并入本文。
本申请涉及用于多视点降噪和高动态范围的系统和方法。
技术介绍
多视点成像系统可操作以捕获场景的多个图像。在一些情况下，捕获到的图像可以包括如从不同视点、从不同观看角度、和/或在不同时间段内成像的来自场景的公共元素。此外，可以基于来自捕获到的图像的公共元素来将图像校正应用于多个图像中的至少一个图像。
技术实现思路
本公开中的实施例涉及用于改进立体视觉(并且更普遍地，多视点成像系统)中的图像质量的方法和系统。可以在空间上使来自立体视觉成像系统的图像对对齐并且变形，以校正图像时差。对齐和变形的图像对可以是“堆叠”的。可以将降噪算法应用于堆叠的图像。可以将高动态范围算法应用于一个或者多个去噪图像。立体视差(将稳健的连拍去噪(robustburstdenoising)和HDR处理应本文档来自技高网...

【技术保护点】
1.一种系统，包括：多个图像捕获系统，其中所述多个图像捕获系统包括：第一图像捕获系统，所述第一图像捕获系统可操作以捕获第一图像数据，其中所述第一图像捕获系统包括光学耦合到第一光学器件的第一图像传感器；和第二图像捕获系统，所述第二图像捕获系统可操作以捕获第二图像数据，其中所述第二图像捕获系统包括光学耦合到第二光学器件的第二图像传感器；其中所述第一图像捕获系统和所述第二图像捕获系统的相应光轴隔开了基线距离，其中所述第一图像数据和所述第二图像数据包括连拍图像数据，并且其中，所述连拍图像数据包括与具有对象的场景相关联的图像信息；以及包括存储器和处理器的控制器，其中所述存储器被配置为包含指令，并且其中所...

【技术特征摘要】
2015.12.07 US 14/961,1021.一种系统，包括：多个图像捕获系统，其中所述多个图像捕获系统包括：第一图像捕获系统，所述第一图像捕获系统可操作以捕获第一图像数据，其中所述第一图像捕获系统包括光学耦合到第一光学器件的第一图像传感器；和第二图像捕获系统，所述第二图像捕获系统可操作以捕获第二图像数据，其中所述第二图像捕获系统包括光学耦合到第二光学器件的第二图像传感器；其中所述第一图像捕获系统和所述第二图像捕获系统的相应光轴隔开了基线距离，其中所述第一图像数据和所述第二图像数据包括连拍图像数据，并且其中，所述连拍图像数据包括与具有对象的场景相关联的图像信息；以及包括存储器和处理器的控制器，其中所述存储器被配置为包含指令，并且其中所述处理器被配置为执行所述指令以执行操作，所述操作包括：从所述多个图像捕获系统接收连拍图像数据，其中所述连拍图像数据包括对象部分和剩余部分；至少基于所述基线距离，确定与所接收的连拍图像数据相关联的深度图；以及至少部分地基于所确定的深度图生成至少一个输出图像，其中生成所述至少一个输出图像包括：与所述连拍图像数据的所述剩余部分不同地处理所述连拍图像数据的所述对象部分。2.根据权利要求1所述的系统，其中所述第一图像传感器和所述第一光学器件与第一焦距相关联，其中所述第二图像传感器和所述第二光学器件与第二焦距相关联，其中所述第一焦距不同于所述第二焦距，并且其中确定与所接收的连拍图像数据相关联的所述深度图包括：基于与所述第一焦距和所述第二焦距相关联的重叠视野来确定所述深度图。3.根据权利要求1所述的系统，其中，与所述连拍图像数据的所述剩余部分不同地处理所述连拍图像数据的所述对象部分包括：将高动态范围(HDR)函数应用于所述连拍图像数据。4.根据权利要求1所述的系统，其中与所述连拍图像数据的所述剩余部分不同地处理所述连拍图像数据的所述对象部分包括：将来自经过第一曝光时间曝光的第一图像的图像数据和来自经过第二曝光时间曝光的第二图像的图像数据进行组合，其中所述第一曝光时间与所述第二曝光时间不同，并且其中来自所述第一图像的所述图像数据对应于所述连拍图像数据的所述对象部分，并且来自所述第二图像的所述图像数据对应于所述连拍图像数据的所述剩余部分。5.根据权利要求1所述的系统，其中与所述连拍图像数据的所述剩余部分不同地处理所述连拍图像数据的所述对象部分包括：将所述连拍图像数据的所述对象部分与一个或多个图像图块相关联，并将所述连拍图像数据的所述剩余部分与一个或多个不同图像图块相关联。6.根据权利要求1所述的系统，其中，所述连拍图像数据的所述对象部分与对象距离相关联，并且其中，与所述连拍图像数据的所述剩余部分不同地处理所述连拍图像数据的对象部分包括：基于所述对象距离来处理所述连拍图像数据的所述对象部分。7.根据权利要求1所述的系统，其中确定与所接收的连拍图像数据相关联的所述深度图包括：基于所述多个图像捕获系统的视野来确定所述深度图。8.根据权利要求1所述的系统，其中，所述连拍图像数据包括目标图像和参考图像，其中，确定所述深度图包括：确定与所述目标图像相对应的所述场景的光流图，并且其中，所述光流图包括在所述目标图像中每个像素移动以便于与所述参考图像中的对应像素对齐的相对距离和/或方向。9.根据权利要求1所述的系统，其中所述对象包括人。10.根据权利要求1所述的系统，其中所述多个图像捕获系统包括多个智能电话相机。11.一种方法，包括：由计算系统从多个图像捕获系统接收连拍图像数据，其中所述连拍图像数据包括对象部分和剩余部分，其中所述多个图像捕获系统包括共同可操作以捕获所述连拍图像数据的第一图像捕获系统和第二图像捕获系统，其中所述第一图像捕...

【专利技术属性】
技术研发人员：乔纳森·蒂尔顿·巴龙，斯蒂芬·约瑟夫·迪韦尔蒂，瑞安·盖斯，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：美国,US