图像处理装置、图像处理方法和程序制造方法及图纸

提供在关注像素的像素值与周边像素的像素值的相关度较低的情况下也能够提高画质的图像处理装置、图像处理方法和程序。图像处理装置(30)具有：第3外部接口部(31)，其取得包含读出电路的位置信息或多个像素各自的位置信息在内的噪声信息，并且取得摄像元件(105)生成的多个图像数据；以及噪声降低部(35)，其将第3外部接口部(31)取得的图像数据作为校正对象图像数据，根据参照图像数据和噪声信息，对校正对象图像数据中的关注像素的像素值进行校正，所述参照图像数据基于与该校正对象图像数据不同的时间取得的图像数据。

Image processing device, image processing method and program

The image processing device, image processing method and program can also improve image quality in the case of low correlation between pixel value and pixel value of peripheral pixels. The image processing device (30) has third external interface (31), the noise information including location information or a plurality of pixel readout circuit respectively, and obtain the imaging element (105) generates a plurality of image data; and a noise reduction part (35), the third external interface (31) Department of correction object image data as the image data obtained, according to the reference image data and noise information, the correction object image data of the target pixel value is corrected based on the reference image data and the image data is corrected on image data of different time.

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、图像处理方法和程序
本专利技术涉及图像处理装置、图像处理方法和程序，对具有二维状配置的多个像素的摄像元件中产生的RTS噪声这样的、像素值在一定范围内变动的闪烁缺陷噪声进行校正。
技术介绍
近年来，在CMOS(ComplementaryMetalOxideSemiconductor：互补金属氧化物半导体)等摄像元件中，像素和从该像素读出信号的读出电路的细微化得以发展。在这种细微化的读出电路中，感光度的降低和各种噪声的增加成为问题。针对感光度的降低，通过采取多个像素共享一个读出电路来读出信号的共享像素结构，削减摄像元件中的电路所需要的面积，提高各像素的开口率(受光部的比例)，由此提高感光度。另一方面，在摄像元件产生的噪声中，除了由于暗电流而引起的暗电流散粒噪声和由于读出电路中的热噪音等而引起的随机噪声以外，还存在像素值始终示出异常值的缺陷像素、以及像素值随机变动的闪烁缺陷噪声等。在这种闪烁缺陷噪声中存在由于读出电路而引起的RTS(RandomTelegraphSignal：随机电报信号)噪声。作为对该RTS噪声进行校正的技术，公知有如下技术：根据所拍摄的图像中的关注像素的像素值、该关注像素的周边像素的像素值和预先按照摄像元件的每个像素检测到的RTS噪声的噪声电平(以下称为“RTS噪声电平”)，针对关注像素判定是否存在RTS噪声的影响，在判定为存在RTS噪声的影响的情况下，针对该关注像素的像素值加上或减去RTS噪声电平(参照专利文献1)。现有技术文献专利文献专利文献1：日本特开2012-105063号公报
技术实现思路
专利技术要解决的课题但是，在上述专利文献1中，在关注像素的像素值与该关注图像的周边像素的像素值的相关度较高的情况下，能够降低RTS噪声。但是，在上述专利文献1中，有时由于亮点或细微构造物等被摄体而使关注像素的像素值与周边像素的像素值的相关度降低，由此使画质劣化。本专利技术是鉴于上述情况而完成的，其目的在于，提供在关注像素的像素值与周边像素的像素值的相关度较低的情况下也能够提高画质的图像处理装置、图像处理方法和程序。用于解决课题的手段为了解决上述课题并实现目的，本专利技术的图像处理装置对具有多个像素和多个读出电路的摄像元件生成的图像数据中包含的闪烁缺陷噪声进行校正，所述多个像素呈二维状配置，从外部接收光并生成与受光量对应的信号，所述多个读出电路读出所述信号作为像素值，其特征在于，所述图像处理装置具有：取得部，其取得包含产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息在内的噪声信息以及所述图像数据；以及校正部，其将所述取得部取得的所述图像数据作为校正对象图像数据，根据参照图像数据和所述噪声信息，对所述校正对象图像数据中的关注像素的像素值进行校正，所述参照图像数据基于与该校正对象图像数据不同的时间取得的所述图像数据。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述图像处理装置具有移动量计算部，该移动量计算部根据所述校正对象图像数据和所述参照图像数据计算被摄体的移动量，所述校正部根据所述移动量计算部计算出的所述移动量取得与所述关注像素或所述关注像素附近的像素对应的所述参照图像数据的参照像素，根据该参照像素的像素值对所述关注像素的像素值进行校正。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，在所述关注像素中产生所述闪烁缺陷噪声的情况下，与未产生所述闪烁缺陷噪声的情况相比，所述校正部增大所述关注像素处的噪声降低处理的强度。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，在所述关注像素中产生所述闪烁缺陷噪声的情况下，所述校正部增大使用所述参照图像数据的时间方向的噪声降低处理的强度。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，在所述关注像素中产生所述闪烁缺陷噪声的情况下，所述校正部增大使用所述关注像素周边的像素的空间方向的噪声降低处理的强度。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述校正部根据所述参照像素的像素值计算与未产生所述闪烁缺陷噪声的情况下的像素值相当的代表值，根据该代表值对所述关注像素的像素值进行校正。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述校正部根据所述关注像素的像素值计算所述代表值。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述校正部根据未产生所述闪烁缺陷噪声的所述参照像素的像素值或对所述闪烁缺陷噪声进行校正后的所述参照像素的像素值，计算所述代表值。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述校正部根据未产生所述闪烁缺陷噪声的所述关注像素周边的像素的像素值，计算所述代表值。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述图像处理装置还具有噪声量估计部，该噪声量估计部估计所述关注像素周边的随机噪声量，所述校正部根据所述随机噪声量计算所述代表值。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述噪声信息还包含与产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息对应的所述闪烁缺陷噪声的噪声电平即闪烁缺陷噪声电平，所述校正部使用所述闪烁缺陷噪声电平对所述关注像素的像素值进行校正。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述噪声信息还包含与产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息对应的所述闪烁缺陷噪声的噪声电平即闪烁缺陷噪声电平，所述闪烁缺陷噪声电平越大，则所述校正部越增大所述关注像素处的噪声降低处理的强度。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述噪声信息还包含与产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息对应的所述闪烁缺陷噪声的噪声电平即闪烁缺陷噪声电平，所述校正部根据所述闪烁缺陷噪声电平计算所述代表值。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述图像处理装置具有置信度计算部，该置信度计算部计算表示所述移动量计算部计算出的所述移动量的似然性的置信度，所述校正部根据所述置信度计算所述代表值。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述参照图像数据是所述摄像元件在与所述校正对象图像数据对应的所述图像数据紧前生成的所述图像数据。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述参照图像数据是在所述校正部即将对所述校正对象图像数据进行校正之前由所述校正部进行了校正的图像数据。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述参照图像数据是所述摄像元件在与所述校正对象图像数据对应的所述图像数据之前生成的多个所述图像数据。并且，本专利技术的图像处理装置的特征在于，在上述专利技术中，所述闪烁缺陷噪声是随机电报信号噪声。并且，本专利技术的图像处理方法由图像处理装置来执行，所述图像处理装置对具有多个像素和多个读出电路的摄像元件生成的图像数据中包含的闪烁缺陷噪声进行校正，所述多个像素呈二维状配置，从外部接收光并生成与受光量对应的信号，所述多个读出电路读出所述信号作为像素值，其特征在于，所述图像处理方法包含以下步骤：取得步骤，取得包含产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素本文档来自技高网...

【技术保护点】
一种图像处理装置，其对具有多个像素和多个读出电路的摄像元件生成的图像数据中包含的闪烁缺陷噪声进行校正，所述多个像素呈二维状配置，从外部接收光并生成与受光量对应的信号，所述多个读出电路读出所述信号作为像素值，其特征在于，所述图像处理装置具有：取得部，其取得包含产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息在内的噪声信息以及所述图像数据；以及校正部，其将所述取得部取得的所述图像数据作为校正对象图像数据，根据参照图像数据和所述噪声信息，对所述校正对象图像数据中的关注像素的像素值进行校正，所述参照图像数据基于与该校正对象图像数据不同的时间取得的所述图像数据。

【技术特征摘要】
【国外来华专利技术】1.一种图像处理装置，其对具有多个像素和多个读出电路的摄像元件生成的图像数据中包含的闪烁缺陷噪声进行校正，所述多个像素呈二维状配置，从外部接收光并生成与受光量对应的信号，所述多个读出电路读出所述信号作为像素值，其特征在于，所述图像处理装置具有：取得部，其取得包含产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息在内的噪声信息以及所述图像数据；以及校正部，其将所述取得部取得的所述图像数据作为校正对象图像数据，根据参照图像数据和所述噪声信息，对所述校正对象图像数据中的关注像素的像素值进行校正，所述参照图像数据基于与该校正对象图像数据不同的时间取得的所述图像数据。2.根据权利要求1所述的图像处理装置，其特征在于，所述图像处理装置具有移动量计算部，该移动量计算部根据所述校正对象图像数据和所述参照图像数据计算被摄体的移动量，所述校正部根据所述移动量计算部计算出的所述移动量取得与所述关注像素或所述关注像素附近的像素对应的所述参照图像数据的参照像素，根据该参照像素的像素值对所述关注像素的像素值进行校正。3.根据权利要求1或2所述的图像处理装置，其特征在于，在所述关注像素中产生所述闪烁缺陷噪声的情况下，与未产生所述闪烁缺陷噪声的情况相比，所述校正部增大所述关注像素处的噪声降低处理的强度。4.根据权利要求3所述的图像处理装置，其特征在于，在所述关注像素中产生所述闪烁缺陷噪声的情况下，所述校正部增大使用所述参照图像数据的时间方向的噪声降低处理的强度。5.根据权利要求3所述的图像处理装置，其特征在于，在所述关注像素中产生所述闪烁缺陷噪声的情况下，所述校正部增大使用所述关注像素周边的像素的空间方向的噪声降低处理的强度。6.根据权利要求2所述的图像处理装置，其特征在于，所述校正部根据所述参照像素的像素值计算与未产生所述闪烁缺陷噪声的情况下的像素值相当的代表值，根据该代表值对所述关注像素的像素值进行校正。7.根据权利要求6所述的图像处理装置，其特征在于，所述校正部根据所述关注像素的像素值计算所述代表值。8.根据权利要求6所述的图像处理装置，其特征在于，所述校正部根据未产生所述闪烁缺陷噪声的所述参照像素的像素值或对所述闪烁缺陷噪声进行校正后的所述参照像素的像素值，计算所述代表值。9.根据权利要求6～8中的任意一项所述的图像处理装置，其特征在于，所述校正部根据未产生所述闪烁缺陷噪声的所述关注像素周边的像素的像素值，计算所述代表值。10.根据权利要求6～9中的任意一项所述的图像处理装置，其特征在于，所述图像处理装置还具有噪声量估计部，该噪声量估计部估计所述关注像素周边的随机噪声量，所述校正部根据所述随机噪声量计算所述代表值。11.根据权利要求1～10中的任意一项所述的图像处理装置，其特征在于，所述噪声信息还包含与产生由所述读出电路引起的闪烁缺陷噪声的所述读出电路的位置信息或所述多个像素各自的位置信息对应的所述闪烁缺陷噪声的噪声电平即闪烁缺陷噪声电平，所述校正部使用所述闪烁缺陷噪声电平对所述关注像素的像素值进行校正。12.根据权利要求3～5中的任意一项所述的图像处理装置，其特征在于，所述噪声信...

【专利技术属性】
技术研发人员：丸山裕辉，市川学，
申请(专利权)人：奥林巴斯株式会社，
类型：发明
国别省市：日本,JP