本发明专利技术涉及能够从包括周期性噪声的图像去除所述周期性噪声的图像处理装置、图像处理方法、电子设备和程序。本发明专利技术包括用于针对每个图像估算在不同曝光条件下拍摄的每个图像中所包括的周期性噪声成分的估算单元。所述估算单元通过利用了所述曝光条件下的所述噪声成分之间的相互关系的运算针对每个图像估算所述周期性噪声成分。例如，所述周期性噪声是闪烁。所述噪声成分之间的所述相互关系是用频率空间中的所述曝光条件的快门函数表示的。本发明专利技术可应用于成像装置。
【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及信息处理装置、信息处理方法、电子设备和程序。具体地，本专利技术涉及用于对在图像中出现的闪烁(flicker)进行校正的图像处理装置、图像处理方法、电子设备和程序。
技术介绍
当在荧光灯的照明下通过使用配置有诸如互补金属氧化物半导体(CMOS)成像器件等XY地址扫描型成像器件的相机拍摄图像时，在视频信号中出现条纹状的亮度不均匀或颜色不均匀。这种现象被称为闪烁。该闪烁是由于与商用电源(AC)连接且基本上以两倍于电源频率的周期的周期重复闪烁的荧光灯以及由于成像器件的工作原理而引起的。在出现闪烁的图像中出现了沿水平方向延伸的条纹状亮度变化图案。例如，当观察运动图像时，观察到垂直地出现的条纹状图案。披露了用于抑制这种闪烁的技术的现有技术的示例例如包括专利文献1。专利文献1披露了用于通过如下方式去除图像中包括的闪烁成分的方法：从图像中提取闪烁成分，计算具有该闪烁成分的反相图案的闪烁校正系数，并通过使图像的像素值乘以闪烁校正系数来执行校正。引用列表专利文献专利文献1：JP2011-160090A
技术实现思路
技术问题由此，例如，为了生成高动态范围图像，已经提出了如下一种成像装置，该成像装置通过拍摄设定了不同曝光时段的多个图像来生成设定了从低亮度部分到高亮度部分的更精确像素值的高动态范围图像。当尝试将专利文献1中披露的上述处理应用于如上所述的在不同曝光时段中拍摄多个图像的成像装置时，必须针对在不同曝光时段中拍摄的多个图像中的每者分别执行诸如提取闪烁成分的处理、计算闪烁成分的反相校正系数的处理和基于该校正系数的校正处理等处理。以此方式，为了对具有不同曝光时段的图像中的每者执行上述处理，存在硬件部件可能增加且处理周期可能增大的可能性。本专利技术是针对这些情况而提出的，并旨在能够利用简单构造来有效地执行减少诸如闪烁等周期性噪声的处理。问题的解决方案根据本专利技术的方面，图像处理装置包括：估算单元，其针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分。所述估算单元通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分。所述周期性噪声可以是闪烁。所述噪声成分之间的所述相互关系可以由频率空间中的所述曝光条件的快门函数表示。所述估算单元可以通过使用如下值来估算所述噪声成分，所述值是通过对所述图像进行积分，与预定的窗函数相乘并执行傅里叶级数展开获得的。所述积分可以是针对任一所述图像中的不饱和的不饱和部分沿水平方向执行的。所述估算单元可通过获得矩阵Q并获得光源的波动成分F来获得频率空间中的所述噪声成分，其中QF＝0，且所述估算单元可通过对所述频率空间中的所述噪声成分执行傅里叶级数逆变换来估算每个所述图像的所述噪声成分。所述噪声成分之间的所述相互关系可由通过对所述图像进行积分并针对所述图像的每行执行除法运算而获得的比值表示。所述积分可以是针对任一所述图像中的不饱和的不饱和部分沿水平方向执行的。所述估算单元可以获得矩阵RT的特征值1的特征向量，并将所述特征向量设定为通过对所述图像的所述噪声成分执行傅里叶级数展开而获得的值，其中R是对所述比值执行傅里叶级数展开而获得的矩阵，且T是从所述曝光条件获得的矩阵。所述图像的所述噪声成分可以是通过对所述特征向量执行傅里叶级数逆变换计算的。通过对与已经计算所述噪声成分的图像不同的图像的所述噪声成分执行傅里叶级数展开而获得的值可以是通过将所述特征向量乘以从所述曝光条件获得的系数计算的，且所述图像的所述噪声成分可以是通过对通过执行傅里叶级数展开而获得的所述值执行傅里叶级数逆变换计算的。所述估算单元生成下列方程式中的矩阵RT，并获得所述图像的所述噪声成分，[数学式1]其中R是所述比值，T是从所述曝光条件获得的系数，且G是所述图像的所述噪声成分。所述估算单元可以获得矩阵rt的特征值1的特征向量，并估算出所述特征向量是所述图像的所述噪声成分，其中矩阵r是所述比值，且矩阵t是从所述曝光条件获得的矩阵。与已经计算所述噪声成分的图像不同的图像的所述噪声成分可以是从所估算的所述噪声成分的线性和计算的。所述估算单元通过借助最小二乘估计获得满足下列方程式的g1和g2来获得每个所述图像的所述噪声成分，[数学式2]t-II-rg1g2=0]]>其中r是所述比值，t是从所述曝光条件获得的值，I是所述图像的像素值，且g是所述噪声成分。根据本专利技术的方面，图像处理方法包括：针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分的估算步骤。所述估算步骤包括通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分的处理。根据本专利技术的方面，使计算机执行处理的程序，所述处理包括：针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分的估算步骤.所述估算步骤包括通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分的处理。根据本专利技术的方面，电子设备包括：信号处理单元，其用于对从成像器件输出的像素信号执行信号处理，其中，所述信号处理单元包括：估算单元，其针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分；以及校正单元，其用于通过使用在所述估算单元处估算的所述噪声成分来执行从所述图像去除噪声的校正。所述估算单元通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分。在根据本专利技术的一个方面的图像处理装置、图像处理方法和程序中，针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分。通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分。在根据本专利技术的一个方面的电子设备中，对从所述成像器件中输出的像素信号执行信号处理，且作为所述信号处理中的一个处理，针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分，且通过使用所估算的噪声成分执行校正以从所述图像去除噪声。通过如下方式来执行所述估算：通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分。本专利技术的有利效果根据本专利技术的一个方面，可以在简单构造下高效地执行减少诸如闪烁等周期性噪声的处理。应注意，本专利技术的有利效果不限于此处所述的有利效果，并可本文档来自技高网...
【技术保护点】
一种图像处理装置，其包括：估算单元，其针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪声成分，其中，所述估算单元通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算来估算每个所述图像的所述周期性噪声成分。
【技术特征摘要】
【国外来华专利技术】2013.12.04 JP 2013-2511641.一种图像处理装置，其包括：
估算单元，其针对在不同曝光条件下拍摄的图像估算每个所述图像中包括的周期性噪
声成分，
其中，所述估算单元通过利用所述曝光条件下的所述噪声成分之间的相互关系的运算
来估算每个所述图像的所述周期性噪声成分。
2.如权利要求1所述的图像处理装置，其中，所述周期性噪声是闪烁。
3.如权利要求1所述的图像处理装置，其中，所述噪声成分之间的所述相互关系由频率
空间中的所述曝光条件的快门函数表示。
4.如权利要求1所述的图像处理装置，其中，所述估算单元通过使用如下值来估算所述
噪声成分，所述值是通过对所述图像进行积分，与预定的窗函数相乘并执行傅里叶级数展
开获得的。
5.如权利要求4所述的图像处理装置，其中，所述积分是针对任一所述图像中的不饱和
的不饱和部分沿水平方向执行的。
6.如权利要求1所述的图像处理装置，
其中，所述估算单元通过获得矩阵Q并获得光源的波动成分F来获得频率空间中的所述
噪声成分，其中QF＝0，且
其中，所述估算单元通过对所述频率空间中的所述噪声成分执行傅里叶级数逆变换来
估算每个所述图像的所述噪声成分。
7.如权利要求1所述的图像处理装置，其中，所述噪声成分之间的所述相互关系由通过
对所述图像进行积分并针对所述图像的每行执行除法运算而获得的比值表示。
8.如权利要求7所述的图像处理装置，其中，所述积分是针对任一所述图像中的不饱和
的不饱和部分沿水平方向执行的。
9.如权利要求7所述的图像处理装置，其中，所述估算单元获得矩阵RT的特征值1的特
征向量，并将所述特征向量设定为通过对所述图像的所述噪声成分执行傅里叶级数展开而
获得的值，其中R是对所述比值执行傅里叶级数展开而获得的矩阵，且T是从所述曝光条件
获得的矩阵。
10.如权利要求9所述的图像处理装置，其中，所述图像的所述噪声成分是通过对所述
特征向量执行傅里叶级数逆变换计算的。
11.如权利要求10所述的图像处理装置，
其中，通过对与已经计算所述噪声成分的图像不同的图像的所述噪声成分执行傅里叶
级数展开而获得的值是通过将所述特征向量乘以从所述曝光条件获得的系数计算的，且
其中...
【专利技术属性】
技术研发人员：增野智经，城坚诚，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。