图像处理装置、图像处理方法、程序和成像装置制造方法及图纸

本发明专利技术涉及图像处理装置、图像处理方法、程序和成像装置。提供了一种图像处理装置，包括：图像获取单元，被配置为获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得该运动矢量的参考图像的第二图像；以及图像产生器，被配置为通过以预定的混合比率将第一图像与第二图像混合来产生第三图像。

【技术实现步骤摘要】
图像处理装置、图像处理方法、程序和成像装置相关申请的交叉引用本申请要求于2013年3月25日提交的日本在先专利申请JP2013-062088的优先权，该专利申请的全部内容以引用的方式并入本文。
本公开涉及图像处理装置、图像处理方法、程序和成像装置。
技术介绍
在拍摄(摄影)图像时，已知一种用于通过叠加多个连续拍摄的图像(帧)来获得具有降低了的噪声的图像的技术。作为例子，这多个图像被叠加在要处理的图像(在下文中适当地被称为目标图像)上，并且在拍摄目标图像之前或之后被连续地拍摄的并且通过运动估计和运动补偿来对准的这多个图像被叠加。在这种情况下，在时间方向上对彼此基本上相同的图像进行积分，由此，在每个图像中随机地包含的噪声被抵消，从而降低了噪声。在下文中，通过这种方法实现的降噪(NR)被称为帧NR处理。 对于在目标图像中设置的目标块，通过使用估计的局部运动矢量来计算在两个图像之间的表示在整个图像之上的变换的全局运动。全局运动通常表示作为图像的静止图像部分的背景的运动和运动量。 作为使用全局运动的技术，有一种在JP2009-290827A中公开的技术。在JP2009-290827A中公开的技术中，图像被分离成静止背景图像部分和运动被摄体部分，使用与从全局运动产生的全局运动矢量匹配的局部运动矢量来产生运动补偿图像(适当地被称为MC图像)，并且MC图像和目标图像被叠加。在这种技术中，通过适应地使用全局运动矢量和局部运动矢量，产生MC图像，并且执行叠加处理。
技术实现思路
作为例子，当在具有低照度的暗场所执行图像拍摄的情况下，执行准确的运动估计是非常困难的，因此，运动矢量的可靠性降低。如果基于具有低可靠性的运动矢量的MC图像被叠加在目标图像上，则存在通过该处理获得的图像的质量劣化的问题。 因此，本公开的一个实施例提供一种能够产生要叠加在目标图像上的适当的图像的图像处理装置、图像处理方法、程序和成像装置。 根据本公开，为了实现上述目的，提供一种图像处理装置，包括:图像获取单元，被配置为获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得该运动矢量的参考图像的第二图像；以及图像产生器，被配置为通过以预定的混合比率(blendrat1)将第一图像与第二图像混合来产生第三图像。 根据本公开，例如，提供一种图像处理装置中的图像处理方法，该图像处理方法包括:获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得该运动矢量的参考图像的第二图像；以及通过以预定的混合比将第一图像与第二图像混合来产生第三图像。 根据本公开，例如，提供一种用于使计算机执行图像处理装置中的图像处理方法的程序，该图像处理方法包括:获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得该运动矢量的参考图像的第二图像；以及通过以预定的混合比将第一图像与第二图像混合来产生第三图像。 根据本公开，例如，提供一种成像装置，该成像装置包括:成像单元；图像获取单元，被配置为获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得该运动矢量的参考图像的第二图像，该第二图像是通过成像单元获得的；以及图像产生器，被配置为通过以预定的混合比将第一图像与第二图像混合来产生第三图像；以及图像加法器，被配置为将第三图像和目标图像相加。 根据本公开的实施例中的一个或多个，可以产生要被叠加在目标图像上的适当的图像。 【附图说明】 图1是帧NR处理的例子的概念图； 图2是用于说明在拍摄静止图像时的帧NR处理的例子的示图； 图3是用于说明在拍摄运动图像时的帧NR处理的例子的示图； 图4是用于说明典型的帧NR处理的例子的示图； 图5是用于说明根据实施例的帧NR处理的例子的示图； 图6是示出根据实施例的主要处理的流程的流程图； 图7是示出局部运动矢量的例子的示图； 图8是用于说明评估运动矢量的可靠性的方法的例子的示图； 图9是示出全局运动矢量的例子的示图； 图10是示出针对帧的每个块获得的局部运动矢量的例子的示图； 图11是示出对巾贞的每个块应用局部运动矢量或全局运动矢量的例子的示图； 图12是用于说明评估目标块的背景匹配程度的方法的例子的示图； 图13是示出为了获得运动补偿图像而执行的处理流程的例子的流程图； 图14是用于说明高效地执行块匹配处理的方法的例子的示图； 图15A是示出根据照度的输入图像的电平变化的例子的示图； 图15B是示出根据照度的设置增益的例子的示图； 图15C是示出其增益被调整的输入图像的电平的例子的示图； 图16A是示出其增益被调整的输入图像的电平的例子的示图； 图16B是示出根据照度设置混合比的例子的示图； 图17是示出成像装置的示例性配置的框图； 图18是示出增益调整器的示例性配置的框图； 图19是示出运动矢量估计部的示例性配置的框图； 图20是示出目标块缓冲器的示例性配置的框图； 图21是示出参考块缓冲器的示例性配置的框图； 图22是示出被加图像产生部的示例性配置的框图；以及 图23是示出图像加法器的示例性配置的框图。 【具体实施方式】 在下文中，将参照附图详细地描述本公开的优选实施例。要注意，在本说明书和附图中，具有基本上相同的功能和结构的构成要素用相同的附图标记表示，并且省略对这些构成要素的重复说明。 [0041 ] 将按照以下顺序进行描述。 < 1.实施例〉 < 2.变型例 > 下面描述的实施例和变型例是本公开的优选的说明性例子，并且本公开并不是要局限于这些实施例和变型例。 < 1.实施例〉 (实施例的概要) 在描述本公开的实施例的概要之前，下面将描述典型的帧降噪(NR)处理。图1是典型的帧NR处理的概念图。在帧NR处理中，连续地拍摄的多个图像Pl至P3在位置上对准(运动补偿)，然后被相互叠加，从而提供具有降低的噪声的图像Pmix。在多个连续地拍摄的图像叠加时噪声被降低了，因为在时间方向上对彼此基本上相同的图像进行积分，从而在每一个图像中随机地包含的噪声被抵消。 要叠加的多个图像Pl至P3的数量并不限于3，而可以使用两个图像或者四个以上的图像。作为例子，当成像装置捕获静止图像时，如图2所示，高速连续地捕获的多个图像之中的第一捕获图像P1变成目标图像。第二和后续的捕获图像(例如，图像P20和P30)充当参考图像，并且被顺次地叠加在目标图像PlO上。目标图像有时被称为目标帧，并且参考图像有时被称为参考中贞。 作为例子，当成像装置捕获图像时，顺次地捕获的连续帧的图像中的每一个变成目标图像，如图3所示。目标图像(例如，图像P50)的前一帧的图像(例如，图像P60)充当参考图像，并且被叠加在目标图像上。换句话说，一个帧的图像可以是目标图像，并且当另一中贞的图像是目标图像时可以是参考图像。 这样，在连续地捕获的图像被叠加的帧NR处理中，要叠加的目标图像和参考图像之间的位置对准(运动补偿)是重要的。在一些情况下，对于这些图像，例如，由于摄影者的照相机抖动等，可能会发生图像位置的位移(图像模糊)。此外，在一些情况下，对于每个图像，由于被摄体自身的移动，也发生位移。因此，在根据实施例的本文档来自技高网...

【技术保护点】
一种图像处理装置，包括：图像获取单元，被配置为获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得所述运动矢量的参考图像的第二图像；以及图像产生器，被配置为通过以预定的混合比率将第一图像与第二图像混合来产生第三图像。

【技术特征摘要】
2013.03.25 JP 2013-0620881.一种图像处理装置，包括: 图像获取单元，被配置为获取使用指示帧之间的运动的运动矢量获得的第一图像和用作用于获得所述运动矢量的参考图像的第二图像；以及 图像产生器，被配置为通过以预定的混合比率将第一图像与第二图像混合来产生第三图像。2.根据权利要求1所述的信息处理装置，还包括: 检测器，被配置为检测输入图像的亮度；以及 混合比率设置单元，被配置为基于输入图像的亮度来设置所述混合比率。3.根据权利要求2所述的图像处理装置，其中当输入图像的亮度大于阈值时，混合比率设置单元将第二图像相对于第一图像的混合比率设置为零。4.根据权利要求2所述的图像处理装置，其中混合比率设置单元设置所述混合比率，使得第二图像相对于第一图像的混合比率随着输入图像的亮度增加而减小。5.根据权利要求1所述的信息处理装置，还包括: 图像加法器，被配置为将第三图像和目标图像相加。6.根据权利要求2所述的信息处理装置，还包括: 增益设置单元，被配置为基于输入图像的亮度设置对于输入图像的增益， 其中，混合比率设置单元根据按所设置的增益调整的输入图像的电平来设置所述混合比率。7.根据权利要求1所述的...

【专利技术属性】
技术研发人员：沼田怜，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP