The object of the invention is to provide an image processing device, image processing method and program which can use the gain value to interpolate the gain of the pixel value of the phase difference detection pixel even when generating the image for display requiring real-time performance. The image processing apparatus (60) acquires each frame image of the time sequence of the dynamic image in turn, and calculates the gain value used in the gain interpolation of the pixel value of the pixel used for the phase difference detection of the current frame image according to the past frame image of the acquired time sequence. Moreover, the image processing apparatus (60) uses the gain value to interpolate the pixel value of the pixel used for the phase difference detection of the current frame image.
【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法及程序
本专利技术涉及一种图像处理装置、图像处理方法及程序,尤其涉及一种进行从相位差检测用像素输出的像素值的插值的技术。
技术介绍
一直以来,已知有通过像面相位差AF(自动聚焦,Autofocus)技术进行对焦的摄像装置。通过像面相位差AF技术进行对焦的摄像装置中,具备有普通像素和相位差检测用像素离散地排列的成像元件。相位差检测用像素中,遮光膜开口的面积比普通像素小,因此当根据相位差检测用像素的输出值生成图像时,需要对相位差检测用像素的像素值进行校正来使用。因此,提出有与相位差检测用像素的像素值的校正相关的技术。例如,专利文献1中记载有如下内容,即,一种能够装卸透镜装置的摄像装置,存在与从透镜装置获取的透镜信息中包含的透镜ID(identification)对应的校正增益值时,选择通过增益校正处理对所有的相位差检测用像素的输出信号进行校正的方法,没有与透镜ID对应的校正增益值时,选择通过插值校正处理对所有的相位差检测用像素的输出信号进行校正的方法。在此,插值校正处理是指,通过将校正对象像素的输出信号(像素值)替换为利用摄像用像素的输出信号生成的信号来进行校正,所述摄像用像素的输出信号检测位于校正对象像素周围的与校正对象像素相同的颜色。并且,例如专利文献2中记载有如下技术,即,一种具有相位差检测用像素及普通像素的成像元件,根据相位差检测用像素的像素数据的混入率,改变被增益调整的相位差检测像素的像素数据的加权系数来进行校正处理。以往技术文献专利文献 ...
【技术保护点】
1.一种图像处理装置,其具备:/n成像元件,二维地配置有多个相位差检测用像素和多个普通像素;/n图像获取部,在动态图像的拍摄中从所述成像元件依次获取具有所述多个相位差检测用像素的像素值及所述多个普通像素的像素值的帧图像的所述动态图像的时间顺序的各帧图像;/n增益值计算部,根据通过所述图像获取部获取的所述时间顺序的过去帧图像,计算在当前帧图像的所述相位差检测用像素的像素值的增益插值中使用的增益值;/n第1增益插值部,使用所述增益值,对所述当前帧图像的所述相位差检测用像素的像素值进行插值;及/n显示用图像生成部,根据通过所述第1增益插值部进行插值的所述当前帧图像的所述相位差检测用像素的像素值及所述普通像素的像素值,生成所述当前帧图像的显示用图像。/n
【技术特征摘要】
【国外来华专利技术】20170330 JP 2017-0685581.一种图像处理装置,其具备:
成像元件,二维地配置有多个相位差检测用像素和多个普通像素;
图像获取部,在动态图像的拍摄中从所述成像元件依次获取具有所述多个相位差检测用像素的像素值及所述多个普通像素的像素值的帧图像的所述动态图像的时间顺序的各帧图像;
增益值计算部,根据通过所述图像获取部获取的所述时间顺序的过去帧图像,计算在当前帧图像的所述相位差检测用像素的像素值的增益插值中使用的增益值;
第1增益插值部,使用所述增益值,对所述当前帧图像的所述相位差检测用像素的像素值进行插值;及
显示用图像生成部,根据通过所述第1增益插值部进行插值的所述当前帧图像的所述相位差检测用像素的像素值及所述普通像素的像素值,生成所述当前帧图像的显示用图像。
2.根据权利要求1所述的图像处理装置,其具备:
周边像素值计算部,根据位于所述当前帧图像的所述相位差检测用像素的周边区域的所述普通像素的像素值,计算周边像素值;及
周边像素插值部,使用所述周边像素值,进行所述当前帧图像的所述相位差检测用像素的像素值的插值。
3.根据权利要求2所述的图像处理装置,其具备:
插值控制部,控制所述第1增益插值部和所述周边像素插值部的动作,
当所述增益值计算部计算出所述增益值时,所述插值控制部使所述第1增益插值部进行插值,当所述增益值计算部未计算出所述增益值时,所述插值控制部使所述周边像素插值部进行插值。
4.根据权利要求3所述的图像处理装置,其中,
当所述增益值计算部不计算所述增益值时,所述显示用图像生成部不生成所述当前帧图像的所述显示用图像。
5.根据权利要求3或4所述的图像处理装置,其具备:
参数获取部,获取用于推断所述增益值的信息即增益值推断参数;
推断增益值计算部,根据通过所述参数获取部获取的所述增益值推断参数,计算推断增益值;及
第2增益插值部,使用所述推断增益值,对所述当前帧图像的所述相位差检测用像素的像素值进行插值,
当所述推断增益值计算部计算出所述推断增益值时,所述插值控制部使所述第2增益插值部进行插值。
6.根据权利要求5所述的图像处理装置,其中,
当所述参数获取部未获取所述增益值推断参数时,所述显示用图像生成部不生成所述当前帧图像的所述显示用图像。
7.根据权利要求5或6所述的图像处理装置,其中,
所述参数获取部所获取的所述增益值推断参数包含与所述成像元件接收的光束所通过的透镜光瞳的形状相关的信息及与所述相位差检测用像素和所述普通像素的入射光线角度特性相关的信息中的至少一个。
8.根据权利要求3至7中任一项所述的图像处理装置,其具备:
摄像条件获取部,针对所述当前帧图像及所述过去帧图像,获取与摄像条件相关的信息,
在所述当前帧图像及...
【专利技术属性】
技术研发人员:田中康一,田中诚二,小林诚,河合智行,
申请(专利权)人:富士胶片株式会社,
类型:发明
国别省市:日本;JP
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。