串扰处理模块、处理串扰的方法和图像处理系统技术方案

被配置为处理图像信号的串扰的串扰处理模块包括校正元素生成单元、存储器和串扰校正检查单元。校正元素生成单元接收所述图像信号和输入信息，并且基于所述输入信息和相对于颜色分离所述图像信号获得的代表性图像信号，生成用于校正所述串扰的种子值和校正参数，其中，所述输入信息与至少所述图像信号的尺寸相关联。所述存储器存储种子值和校正参数。串扰校正检查单元，被配置为接收图像信号，接收所述种子值，以及从所述存储器接收校正串扰的所述校正参数，以及输出最终图像信号和指示基于多个参考值对串扰的校正是通过还是失败的通过/失败信息。

Crosstalk processing module, processing crosstalk method and image processing system

A crosstalk processing module configured to process crosstalk of image signals includes a correction element generating unit, a memory and a crosstalk correction checking unit. The correction element generating unit receives the image signal and input information, and generates seed values and correction parameters for correcting the crosstalk based on the input information and representative image signals obtained relative to the color separation of the image signal, wherein the input information is in phase with at least the size of the image signal. Relation. The memory stores seed values and correction parameters. The crosstalk correction checking unit is configured to receive an image signal, receive the seed value, and receive the correction parameters for correcting crosstalk from the memory, and output the final image signal and indicate whether crosstalk correction based on multiple reference values is passed/failed information.

【技术实现步骤摘要】
串扰处理模块、处理串扰的方法和图像处理系统相关申请的交叉引用本申请要求于2017年4月24日在韩国知识产权局(KIPO)递交的韩国专利申请No.10-2017-0052508的优先权，其全部内容通过引用合并于此。
示例性实施例涉及图像传感器，更具体地涉及用于处理来自图像传感器的图像信号的串扰处理模块、处理图像处理系统的图像信号的串扰的方法。
技术介绍
图像传感器是将照片图像(例如被对象反射的光)转换为电信号的半导体器件。图像传感器广泛用于便携式电子设备，例如数码相机、蜂窝电话等。通常，图像传感器可以分为电荷耦合器件(CCD)图像传感器和互补金属氧化物半导体(CMOS)图像传感器。CMOS图像传感器与CCD图像传感器相比具有一些优点，诸如制造成本低、功耗低、易于与外围电路集成等。近来，已经使用采用多光电二极管器件的图像传感器。
技术实现思路
一些示例性实施例提供了一种能够高效地处理从具有多光电二极管结构的图像传感器产生的图像信号的串扰的串扰处理模块。一些示例性实施例提供了一种能够高效地处理从具有多光电二极管结构的图像传感器产生的图像信号的串扰的方法。一些示例性实施例提供了一种能够高效地处理从具有多光电二极管结构的图像传感器产生的图像信号的串扰的图像处理模块。根据一些示例性实施例，公开了一种被配置为处理从图像传感器产生的图像信号的串扰的串扰处理模块。所述图像传感器包括像素阵列，所述像素阵列包括沿多个行和多个列布置的多个子像素，表示一种颜色的k个子像素彼此关联地形成。所述数字可以是大于或等于四的整数。串扰处理模块可以包括：校正元素生成单元，被配置为接收所述图像信号和输入信息，并且被配置为生成用于校正所述串扰的种子值和校正参数，其中，所述输入信息与至少所述图像信号的尺寸相关联；存储器，连接到所述校正元素生成单元，被配置为存储所述种子值和所述校正参数；串扰校正检查单元，被配置为接收所述图像信号，从所述存储器接收所述种子值和所述校正参数，校正从所述图像传感器产生的串扰，以及输出最终图像信号和指示基于多个参考值对串扰的校正是通过还是失败的通过/失败信息；以及控制引擎，用来控制所述校正元素生成单元、所述存储器和所述串扰校正检查单元。根据一些示例性实施例，一种处理从图像传感器产生的图像信号的串扰的方法，其中，所述图像传感器包括像素阵列，所述像素阵列包括沿多个行和多个列布置的多个子像素，表示一种颜色的k个子像素彼此关联地形成，其中，数字k是大于或等于4的整数。所述方法可以包括：基于所述图像信号、与所述图像信号的至少尺寸相关联的输入信息、通过按颜色分离图像信号获得的代表性通道图像信号以及通过按通道分离图像信号获得的通道图像信号，生成用于对串扰进行校正的种子值和校正参数；将所述种子值和所述校正参数存储在存储器中；以及基于所述图像信号、所述种子值和所述校正参数来校正每个通道图像信号的串扰，并基于多个参考值来确定对串扰的校正是通过还是失败。所述种子值是基于所述代表性通道图像信号生成的。根据一些示例性实施例，图像处理系统包括图像传感器和串扰处理模块。图像传感器包括像素阵列，所述像素阵列包括沿多个行和多个列布置的多个子像素，多个子像素中k个相邻子像素表示一种颜色，并且所述图像传感器输出图像信号。串扰处理模块处理来自图像传感器的图像信号的串扰，串扰处理模块包括校正元素生成单元、存储器、串扰校正检查单元和控制引擎。校正元素生成单元接收所述图像信号和输入信息，并且基于所述输入信息和相对于颜色分离所述图像信号获得的代表性图像信号，生成用于校正所述串扰的种子值和校正参数，其中，所述输入信息与至少所述图像信号的尺寸相关联。存储器连接到所述校正元素生成单元，并且存储所述种子值和所述校正参数；串扰校正检查单元，被配置为接收图像信号，接收所述种子值，以及从所述存储器接收校正串扰的所述校正参数，以及输出最终图像信号和指示基于多个参考值对串扰的校正是通过还是失败的通过/失败信息；控制引擎控制所述校正元素生成单元、所述存储器和所述串扰校正检查单元。因此，在处理从具有多光电二极管结构的图像传感器输出的图像信号的串扰时，串扰处理模块按照滤色器将图像信号分离成4*k个通道图像信号，并基于k个代表性通道图像信号，生成用于校正4*k个通道图像信号中的每一个的串扰的种子值。因此，串扰处理模块可以减少存储器的存储种子值的存储空间和访问存储器的次数。附图说明根据结合附图的以下详细描述，将更清楚地理解说明性的非限制性示例实施例。图1是示出了根据示例性实施例的图像处理系统的框图。图2是示出根据示例性实施例的图1的图像处理系统中的像素阵列的框图。图3是用于描绘根据示例性实施例的在图2中示出的一个子像素的图。图4和5是根据示例性实施例的沿图2的像素阵列中示出的线II-II'截取的像素的截面图。图6是示出根据示例性实施例的图1中的串扰处理模块的框图。图7是示出根据示例性实施例的图6的串扰处理模块中的校正参数生成单元的框图。图8示出了输入到图7的校正参数生成单元或从其输出的各种图像信号的大小。图9是示出根据示例性实施例的图7的校正参数生成单元中的校正参数计算引擎的框图。图10A和图10B是用于说明在第一绿色通道图像信号IGr1与第一绿色代表性通道图像信号IGrM之间沿第一方向和第二方向的偏移的图。图11是示出图7的校正参数生成单元中的种子值计算引擎的框图。图12是用于说明图11的种子值计算引擎中的图像信号和种子值的图。图13是示出根据示例性实施例的图6的串扰处理模块中的校正检查单元的框图。图14示出了一个通道图像信号被分成多个块。图15示出了从通过/失败检查器输出的直方图。图16是示出根据示例性实施例的处理图像信号的串扰的方法的流程图。图17是示出生成图16中的种子值和校正参数的操作的流程图。图18是示出根据示例性实施例的图17中的生成种子值的操作的流程图。图19是示出确定图16中的串扰校正的通过/失败的操作的流程图。图20是示出了根据示例性实施例的电子系统的框图。具体实施方式将参考附图更全面地描述各种示例实施例，附图中示出了实施例。图1是示出了根据示例性实施例的图像处理系统的框图。参考图1，图像处理系统10可以被实现为便携式电子设备，诸如包括但不限于，膝上型计算机、蜂窝电话、智能电话、平板个人计算机(PC)、个人数字助理(PDA)、企业数字助理(EDA)、数字静止相机、数字视频相机、便携式多媒体播放器(PMP)、移动互联网设备(MID)、可穿戴计算机、物联网设备(IoT)、万物互联(IoE)设备等。图像处理系统10可以包括光学透镜103、互补金属氧化物半导体(CMOS)图像传感器(或图像传感器)100、数字信号处理器(DSP)200和显示器240。图像处理系统10还可以包括串扰处理模块300。图像传感器100可以生成与通过光学透镜103输入的对象101相对应的图像数据IDTA。图像数据IDTA可以对应于从多个光电转换元件输出的像素信号。例如，光电转换元件可以被实现为光电二极管、光电晶体管、光电门或钉扎光电二极管。图像传感器100可以包括像素阵列110、行驱动器120、模数转换器(ADC)块125、合并(binning)块130、定时生成器140、控制寄存器块150、合并控本文档来自技高网...

【技术保护点】
1.一种串扰处理模块，被配置为处理从图像传感器产生的图像信号的串扰，其中，所述图像传感器包括像素阵列，所述像素阵列包括沿多个行和多个列布置的多个子像素，表示一种颜色的k个子像素彼此关联地形成，其中，数字k是大于或等于4的整数，所述串扰处理模块包括：校正元素生成单元，被配置为接收所述图像信号和输入信息，并且被配置为生成用于校正所述串扰的种子值和校正参数，其中，所述输入信息与至少所述图像信号的尺寸相关联；存储器，连接到所述校正元素生成单元，被配置为存储所述种子值和所述校正参数；串扰校正检查单元，被配置为接收所述图像信号，从所述存储器接收所述种子值和所述校正参数，校正从所述图像传感器产生的串扰，以及输出最终图像信号和指示基于多个参考值对串扰的校正是通过还是失败的通过/失败信息；以及控制引擎，被配置为控制所述校正元素生成单元、所述存储器和所述串扰校正检查单元。

【技术特征摘要】
2017.04.24 KR 10-2017-00525081.一种串扰处理模块，被配置为处理从图像传感器产生的图像信号的串扰，其中，所述图像传感器包括像素阵列，所述像素阵列包括沿多个行和多个列布置的多个子像素，表示一种颜色的k个子像素彼此关联地形成，其中，数字k是大于或等于4的整数，所述串扰处理模块包括：校正元素生成单元，被配置为接收所述图像信号和输入信息，并且被配置为生成用于校正所述串扰的种子值和校正参数，其中，所述输入信息与至少所述图像信号的尺寸相关联；存储器，连接到所述校正元素生成单元，被配置为存储所述种子值和所述校正参数；串扰校正检查单元，被配置为接收所述图像信号，从所述存储器接收所述种子值和所述校正参数，校正从所述图像传感器产生的串扰，以及输出最终图像信号和指示基于多个参考值对串扰的校正是通过还是失败的通过/失败信息；以及控制引擎，被配置为控制所述校正元素生成单元、所述存储器和所述串扰校正检查单元。2.根据权利要求1所述的串扰处理模块，其中，所述多个子像素包括第一滤色器、第二滤色器、第三滤色器和第四滤色器，第一滤色器、第二滤色器、第三滤色器和第四滤色器中的每一个使用k个子像素形成，以及其中，所述校正元素生成单元包括：图像分离引擎，被配置为相对于与每个滤色器对应的子像素的每个通道将图像信号分离成4*k个通道图像信号；代表性通道图像生成引擎，被配置为相对于每个滤色器计算所述4*k个通道图像信号中的每一个的像素值的代表值，以生成k个代表性通道图像信号；校正参数计算引擎，被配置为基于所述4*k个通道图像信号和所述k个代表性通道图像信号来计算所述校正参数；以及种子值计算引擎，被配置为基于所述k个代表性通道图像信号和所述输入信息来生成所述种子值。3.根据权利要求2所述的串扰处理模块，其中，所述图像信号具有由沿第一方向的p个子像素和沿与所述第一方向垂直的第二方向的q个子像素限定的第一尺寸，其中，p和q是四的倍数且大于四；以及每个通道图像信号和每个代表性通道图像信号具有由沿第一方向的p/k个子像素和沿第二方向的q/k个子像素限定的第二尺寸。4.根据权利要求2所述的串扰处理模块，其中，所述校正参数计算引擎包括：第一校正参数计算器，被配置为基于所述k个代表性通道图像信号和所述4*k个通道图像信号，相对于每个通道计算所述k个代表性通道图像信号中的每一个的像素值之和与所述4*k个通道图像信号中的每一个的像素值之和的比，以计算4*k个第一校正参数；以及第二校正参数计算器，用于基于所述k个代表性通道图像信号和所述4*k个通道图像信号计算4*k对第二校正参数，每对第二校正参数包括沿第一方向的第一偏移和沿第二方向的第二偏移，其中，所述第二方向垂直于所述第一方向，所述第一偏移与所述k个代表性通道图像信号中的每一个与相同颜色通道中的k个图像信号中的每一个之间在所述第一方向上的偏移相关联，所述第二偏移与所述k个代表性通道图像信号中的每一个与所述相同颜色通道中的k个图像信号中的每一个之间在所述第二方向上的偏移相关联，并且所述相同颜色通道中的所述k个图像信号与对应于相同滤色器的图像信号相关联。5.根据权利要求4所述的串扰处理模块，其中，所述第二校正参数计算器被配置为：基于所述k个代表性通道图像信号中的每一个的和所述相同颜色通道中的k个图像信号中的每一个的、在所述第二方向上的像素值的第一数量的绝对值和在所述第一方向上的像素值的第二数量的绝对值，计算所述4*k对第二校正参数。6.根据权利要求2所述的串扰处理模块，其中，所述种子值计算引擎包括：网格图像生成器，被配置为基于所述输入信息将所述k个代表性通道图像信号中的每一个中的r*r个子像素采样为交点，以生成k个网格图像信号，其中，r是大于或等于2的整数；种子值生成器，被配置为对所述k个网格图像信号中的每一个的内部交点进行滤波，以生成针对所述k个代表性通道图像信号中的每一个的中间种子值，其中，所述k个网格图像信号中的每一个的内部交点对应于所述k个网格图像信号中的每一个中除了位于周边区域中的边界交点之外的交点；以及打包器，被配置为存储所述中间种子值的比特以通过压缩所述比特来提供所述种子值。7.根据权利要求6所述的串扰处理模块，其中，所述种子值生成器被配置为：基于所述边界交点中的每个角交点的两个相邻交点的像素值来生成相应的中间种子值。8.根据权利要求7所述的串扰处理模块，其中，所述种子值生成器被配置为：基于所述代表性通道图像信号中与除了所述边界交点中的角交点之外的每个剩余交点对应的像素值和在第一方向上与每个剩余交点相邻的交点的像素值，生成针对每个剩余交点的相应的中间种子值。9.根据权利要求6所述的串扰处理模块，其中，所述种子值生成器被配置为：对每个交点执行中值滤波，以生成所述中间种子值。10.根据权利要求1所述的串扰处理模块，其中，所述校正参数包括第一校正参数和第二校正参数，其中，所述多个子像素包括相对于所述k个子像素的第一滤色器、第二滤色器、第三滤色器和第四滤色器，以及其中，所述串扰校正检查单元包括：增益图生成引擎，被配置为基于所述种子值、所述第一校正参数和所述第二校正参数来生成4*k个增益图；图像分离引擎，被配置为根据与每个滤色器对应的子像素的通道来分离所述图像信号，以产生4*k个通道图像信号；结果图像生成引擎，被配置为将所述4*k个通道图像信号中的每一个的子像素乘以所述4*k个增益图中的相应增益图...

【专利技术属性】
技术研发人员：李多熙，金大官，鲁尧焕，金敬镐，金採盛，闵桐基，赵成元，崔允硕，
申请(专利权)人：三星电子株式会社，
类型：发明
国别省市：韩国,KR