当前位置: 首页 > 专利查询>索尼公司专利>正文

图像处理装置、图像处理方法以及程序制造方法及图纸

技术编号:21440294 阅读:35 留言:0更新日期:2019-06-22 15:01
本技术涉及能够实现被赋予期望的光学效果的重聚焦的图像处理装置、图像处理方法以及程序。聚焦处理单元执行聚焦处理,在该处理中,使用来自多个视点的图像来生成聚焦于指定距离处的处理结果图像。使用来自多个视点的、具有已利用针对各个视点的调整系数调整过的像素值的图像来执行聚焦处理。该技术适用于根据来自多个视点的图像获得重聚焦图像的情况。

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法以及程序
本技术涉及图像处理装置、图像处理方法以及程序,更具体地,涉及例如用于实现伴随着期望的光学效果的重聚焦的图像处理装置、图像处理方法以及程序。
技术介绍
已经提出了一种用于根据多个视点的图像来对重聚焦图像(即,例如用焦点改变的光学系统捕获的图像等)进行重构的光场技术(例如,参见非专利文献1)。例如,非专利文献1公开了一种使用由100个摄像装置构成的摄像装置阵列的重聚焦方法。引用列表非专利文献非专利文献1:BennettWilburn等人,“HighPerformanceImagingUsingLargeCameraArrays”
技术实现思路
本专利技术要解决的问题对于重聚焦,预期实现伴随着用户等期望的光学效果的重聚焦的需要在将来会增加。鉴于这样的状况而提出了本技术,并且本技术旨在实现伴随着期望的光学效果的重聚焦。针对问题的解决方案根据本技术的一种图像处理装置或一种程序如下:一种图像处理装置,包括:获取单元,获取多个视点的图像;以及光收集处理单元,其使用多个视点的图像来执行光收集处理以生成聚焦于预定距离处的处理结果图像,其中,光收集处理单元使用多个视点的、具有利用针对各个视点的调整系数调整过的像素值的图像来执行光收集处理,或者一种用于使计算机用作这种图像处理装置的程序。根据本技术的一种图像处理方法是下述图像处理方法,其包括:获取多个视点的图像;以及使用多个视点的图像来执行光收集处理以生成聚焦于预定距离处的处理结果图像,其中,使用多个视点的、具有利用针对各个视点的调整系数调整过的像素值的图像来执行光收集处理。在根据本技术的图像处理装置、图像处理方法以及程序中,获取多个视点的图像,并且使用多个视点的图像来执行光收集处理以生成聚焦于预定距离处的处理结果图像。利用多个视点的、具有利用针对各个视点的调整系数调整过的像素值的图像来执行该光收集处理。注意,图像处理装置可以是独立装置,或者可以是单个装置中的内部块。此外,要提供的程序可以经由传输介质来传送或者可以记录在记录介质上。本专利技术的效果根据本技术,可以执行伴随着期望的光学效果的重聚焦。注意,本技术的效果不限于本文中描述的效果,而是可以包括本公开内容中描述的任何效果。附图说明图1是示出应用了本技术的图像处理系统的实施方式的示例配置的框图。图2是图像捕获装置11的示例配置的后视图。图3是图像捕获装置11的另一示例配置的后视图。图4是示出图像处理装置12的示例配置的框图。图5是示出由图像处理系统执行的示例处理的流程图。图6是用于说明在插值单元32处生成插值图像的示例的图。图7是用于说明在视差信息生成单元31处生成视差图(disparitymap)的示例的图。图8是用于说明通过由光收集处理单元34执行的光收集处理进行重聚焦的概要的图。图9是用于说明视差转换的示例的图。图10是用于说明重聚焦的概要的图。图11是用于说明由光收集处理单元34执行的光收集处理的示例的流程图。图12是用于说明由调整单元33执行的调整处理的示例的流程图。图13是示出镜头光圈参数的第一示例的图。图14是示出镜头光圈参数的第二示例的图。图15是示出镜头光圈参数的第三示例的图。图16是示出镜头光圈参数的第四示例的图。图17是示出滤波器参数的示例的图。图18是示出图像处理装置12的另一示例配置的框图。图19是用于说明由光收集处理单元51执行的光收集处理的示例的流程图。图20是示出应用了本技术的计算机的实施方式的示例配置的框图。具体实施方式<应用了本技术的图像处理系统的实施方式>图1是示出应用了本技术的图像处理系统的实施方式的示例配置的框图。在图1中,图像处理系统包括图像捕获装置11、图像处理装置12和显示装置13。图像捕获装置11从多个视点捕获对象的图像,并且例如将所获得的作为从多个视点进行捕获的结果的(几乎)泛焦的图像提供给图像处理装置12。图像处理装置12通过使用从图像捕获装置11提供的多个视点的捕获图像来执行用于生成(重构)聚焦于期望对象的图像的诸如重聚焦的图像处理,并且将所获得的作为图像处理结果的处理结果图像提供给显示装置13。显示装置13显示从图像处理装置12提供的处理结果图像。注意,在图1中,构成图像处理系统的图像捕获装置11、图像处理装置12和显示装置13例如可以全部安装在诸如数字(静止/视频)摄像装置的独立设备中或者诸如智能电话的便携式终端等中。替选地,图像捕获装置11、图像处理装置12和显示装置13可以安装在彼此独立的设备中。此外,图像捕获装置11、图像处理装置12和显示装置13中的任何两个装置可以安装在独立于其中安装有其余一个装置的设备的设备中。例如,图像捕获装置11和显示装置13可以安装在用户拥有的便携式终端中,而图像处理装置12可以安装在云中的服务器中。替选地,图像处理装置12的部分块可以安装在云中的服务器中,而图像处理装置12的其余块、图像捕获装置11和显示装置13可以安装在便携式终端中。<图像捕获装置11的示例配置>图2是图1所示的图像捕获装置11的示例配置的后视图。图像捕获装置11包括例如捕获以RGB的值作为像素值的图像的多个摄像装置单元(在下文中也被称为摄像装置)21i,并且多个摄像装置21i从多个视点捕获图像。在图2中,图像捕获装置11包括例如作为多个摄像装置的七个摄像装置211、212、213、214、215、216和217,并且这七个摄像装置211至217被布置在二维平面内。此外,在图2中,七个摄像装置211至217被布置成使得七个摄像装置211至217中的一个(例如,摄像装置211)设置在中心、而其他的六个摄像装置212至217设置在摄像装置211周围,以形成正六边形。因此,在图2中,七个摄像装置211至217中的一个摄像装置21i(i=1,2,...或7)与最靠近摄像装置21i的摄像装置21j(j=1,2,...,或7)之间的距离(光轴之间的距离)为相同的距离B。例如,摄像装置21i与21j之间的距离B可以是大约20mm。在这种情况下,图像捕获装置11可以被设计成具有与诸如IC卡的卡的大小几乎相同的大小。注意,构成图像捕获装置11的摄像装置21i的数量不一定是七个,而是可以采用2到6的数量、或者数量8或更大的数量。此外,在图像捕获装置11中,可以将多个摄像装置21i设置在任何适当的位置处,而不是将其布置成形成诸如如上所述的正六边形的正多边形。在下文中,在摄像装置211至217中,被设置在中心处的摄像装置211也将被称为参考摄像装置211,并且被设置在参考摄像装置211周围的摄像装置212至217也将被称为外围摄像装置212至217。图3是图1所示的图像捕获装置11的另一示例配置的后视图。在图3中,图像捕获装置11包括九个摄像装置2111至2119,并且这九个摄像装置2111至2119被布置成三行和三列。3×3个摄像装置21i(i=11,12,...,和19)中的每个摄像装置被设置在距在摄像装置21i上方、在摄像装置21i下方或者在摄像装置21i左侧或右侧的相邻摄像装置21j(j=11,12,...或19)的距离B处。在下面的描述中,除非另有说明,否则图像捕获装置11例如包括如图2所示的七个摄像装置211本文档来自技高网...

【技术保护点】
1.一种图像处理装置,包括:获取单元,其获取多个视点的图像;以及光收集处理单元,其使用所述多个视点的图像来执行光收集处理以生成聚焦于预定距离处的处理结果图像,其中,所述光收集处理单元使用所述多个视点的、具有利用针对各个视点的调整系数调整过的像素值的图像来执行所述光收集处理。

【技术特征摘要】
【国外来华专利技术】2016.11.08 JP 2016-2177631.一种图像处理装置,包括:获取单元,其获取多个视点的图像;以及光收集处理单元,其使用所述多个视点的图像来执行光收集处理以生成聚焦于预定距离处的处理结果图像,其中,所述光收集处理单元使用所述多个视点的、具有利用针对各个视点的调整系数调整过的像素值的图像来执行所述光收集处理。2.根据权利要求1所述的图像处理装置,还包括:调整单元,其利用与所述视点对应的调整系数来调整所述视点的图像的像素的像素值,其中,所述光收集处理单元执行以下处理:通过设定用于将所述多个视点的图像的像素移位的移位量、根据所述移位量将所述多个视点的图像的像素移位、并对所述像素值进行累计来执行所述光收集处理,以及使用所述多个视点的图像的像素的、已被所述调整单元调整过的像素值来执行所述光收集处理。3.根据权利要求1所述的图像处理装置,其中,所述调整系数是针对各个视点、根据产生预定镜头和光圈的效果的透射率分布而设定的。4.根据权利要求1所述的图像处理装置,其中,所述调整系数是针对各个视点、...

【专利技术属性】
技术研发人员:早坂健吾井藤功久
申请(专利权)人:索尼公司
类型:发明
国别省市:日本,JP

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1