图像处理设备和方法、摄像设备和计算机可读介质技术

本公开涉及图像处理设备和方法、摄像设备和计算机可读介质。公开了一种图像处理设备，其确定用于拍摄要与可见光图像合成的不可见光图像的设置。图像处理设备确定(i)与用于调整可见光图像的亮度的不可见光图像的信号水平有关的第一目标值，(ii)与用于调整可见光图像的对比度的不可见光图像的信号水平有关的第二目标值，使用第一目标值和第二目标值来确定(iii)最终目标值，以及基于最终目标值来确定(iv)用于拍摄不可见光图像的设置。定(iv)用于拍摄不可见光图像的设置。定(iv)用于拍摄不可见光图像的设置。

【技术实现步骤摘要】
图像处理设备和方法、摄像设备和计算机可读介质


[0001]本专利技术涉及图像处理设备、摄像设备、图像处理方法和计算机可读介质。

技术介绍

[0002]已经提出了一种方法，该方法将在由于雾而具有降低的可视性的场景中拍摄的可见光图像与在同一场景中拍摄的红外图像合成，以提高可见光图像的可视性(参见日本特开2017
‑
157902)。
[0003]更详细地，通过在可见光图像的可视性差的区域中增加合成不可见光图像的比率，在逐区域的基础上改善可见光图像的可视性。另外，设置用于拍摄不可见光图像的设置(即，曝光条件)，使得不可见光图像和可见光图像在以高比率合成不可见光图像的区域中具有相似的亮度。
[0004]然而，利用日本特开2017
‑
157902中公开的方法，如果以高比率合成不可见光图像的区域非常暗，则设置用于拍摄图像的设置，使得不可见光图像也非常暗，从而不能充分地获得改善可视性的效果。当以高比率合成不可见光图像的区域非常亮时，也会发生同样的情况。

技术实现思路

[0005]考虑到上述相关技术的问题而构思了本专利技术，并且根据一个方面，本专利技术提供了一种图像处理设备，其能够进行用于拍摄不可见光图像的设置，当与可见光图像合成时，该设置有效地改善了可见光图像的图像质量。
[0006]根据本专利技术的一方面，提供了一种图像处理设备，其确定用于拍摄要与可见光图像合成的不可见光图像的设置，所述图像处理设备包括：第一确定部件，其用于确定与用于调整所述可见光图像的亮度的不可见光图像的信号水平相关的第一目标值；第二确定部件，其用于确定与用于调整所述可见光图像的对比度的不可见光图像的信号水平相关的第二目标值；第三确定部件，其用于使用所述第一目标值和所述第二目标值来确定最终目标值；以及第四确定部件，其用于基于所述最终目标值来确定用于拍摄所述不可见光图像的设置。
[0007]根据本专利技术的另一方面，提供了一种摄像设备，包括：图像传感器，其能够拍摄可见光图像和不可见光图像；以及根据本专利技术的图像处理设备。
[0008]根据本专利技术的另一方面，提供了一种图像处理方法，所述图像处理方法由图像处理设备执行并且确定用于拍摄要与可见光图像合成的不可见光图像的设置，所述图像处理方法包括：确定与用于调整所述可见光图像的亮度的不可见光图像的信号水平相关的第一目标值；确定与用于调整所述可见光图像的对比度的不可见光图像的信号水平相关的第二目标值；使用所述第一目标值和所述第二目标值来确定最终目标值；以及基于所述最终目标值来确定用于拍摄所述不可见光图像的设置。
[0009]根据本专利技术的另一方面，提供了一种存储用于使得计算机用作根据本专利技术的图像
处理设备的程序的计算机可读介质。
[0010]通过以下参考附图对示例性实施例的说明，本专利技术的更多特征将变得明显。
附图说明
[0011]图1是描绘根据实施例的作为图像处理设备的摄像设备的示例功能配置的框图。
[0012]图2是与根据第一实施例的摄像设备的操作有关的流程图。
[0013]图3是与根据第一实施例的摄像设备的操作有关的流程图。
[0014]图4是示意性地描绘可见光图像和红外图像的示例的图。
[0015]图5是描绘根据第一实施例的分割为块的示例的图。
[0016]图6描绘根据第一实施例的确定第一目标值的方法。
[0017]图7A和7B描绘根据第一实施例的确定第二目标值的方法。
[0018]图8是与根据第一实施例的用于确定第三目标值的权重有关的图。
[0019]图9是与根据第二实施例的摄像设备的操作有关的流程图。
[0020]图10是与根据第二实施例的摄像设备的操作有关的流程图。
[0021]图11A至11C是与根据第二实施例的确定增益的方法有关的图。
[0022]图12是与根据第二实施例的确定增益的方法有关的图。
[0023]图13是与根据第三实施例的摄像设备的操作有关的流程图。
[0024]图14是与根据第三实施例的确定用于拍摄图像的设置以及增益的方法有关的图。
具体实施方式
[0025]在下文中，参考附图详细描述实施例。注意，以下实施例不旨在限制所要求保护的专利技术的范围。在实施例中描述了多个特征，但是不限制成需要所有这些特征的专利技术，并且可以适当地组合多个这样的特征。此外，在附图中，对相同或相似的配置赋予相同的附图标记，并且省略对其的冗余说明。
[0026]在以下实施例中，描述了在诸如数字照相机等的摄像设备中实现本专利技术的情况。然而，本专利技术也可以在具有摄像功能的电子器具和能够控制这样的电子器具的控制设备中实现。这样的电子器具和控制设备包括摄像机、计算机装置(诸如个人计算机、平板计算机、媒体播放器或PDA等)、移动电话、智能电话、游戏机、机器人、无人机和行车记录仪。这些装置仅仅是示例，并且本专利技术也可以在其他电子器具和控制设备中实现。
[0027]注意，在附图中示出为块的配置可以通过诸如专用集成电路(ASIC)或现场可编程门阵列(FPGA)等的IC(集成电路)、通过离散电路、以及/或者通过存储器和执行存储在存储器中的程序的处理器的组合来实现。个体块可以通过多个集成电路封装来实现，以及/或者多个块可以通过一个集成电路封装来实现。可以根据操作环境和所需性能等通过不同的配置来实现相同的块。
[0028]图1是描述作为根据本专利技术的图像处理设备的一个示例的摄像设备100的功能配置的示例的框图。控制电路101是能够执行程序的处理器，诸如中央处理单元(CPU)等。作为一个示例，控制电路101通过将存储在只读存储器(ROM)102中的程序加载到随机存取存储器(RAM)103中并执行该程序来控制摄像设备100的各个功能块的操作，从而实现摄像设备100的功能。注意，当光学系统104是可更换镜头单元时，控制电路101通过与包括在光学系
统104中的控制器的通信来控制光学系统104的操作。
[0029]ROM 102是可重写的非易失性存储器。ROM 102存储通过控制电路101执行的程序、摄像设备100的各种设置值和图形用户接口(GUI)数据等。RAM103是控制电路101的主存储器。RAM 103加载要通过控制电路101执行的程序，保持执行程序所需的参数，并且用作图像处理电路107的工作存储器。RAM 103的一部分用作存储要在显示设备109上显示的图像数据的视频存储器。
[0030]光学系统104具有摄像光学系统，其由包括可移动透镜(例如变焦透镜和调焦透镜等)的透镜组和用于可移动透镜的驱动电路构成。光学系统104还可以具有光圈和用于光圈的驱动电路。
[0031]作为示例，摄像电路105可以是具有原色的拜耳滤色器阵列的已知电荷耦合装置(CCD)或互补金属氧化物半导体(CMOS)彩色图像传感器。该图像传感器具有二维排列有多个像素的像素阵列和用于从像素读取信号的外围电路。各个像素具有诸如光电二极管等的光电转换本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理设备，其确定用于拍摄要与可见光图像合成的不可见光图像的设置，所述图像处理设备包括：第一确定部件，其用于确定与用于调整所述可见光图像的亮度的不可见光图像的信号水平相关的第一目标值；第二确定部件，其用于确定与用于调整所述可见光图像的对比度的不可见光图像的信号水平相关的第二目标值；第三确定部件，其用于使用所述第一目标值和所述第二目标值来确定最终目标值；以及第四确定部件，其用于基于所述最终目标值来确定用于拍摄所述不可见光图像的设置。2.根据权利要求1所述的图像处理设备，还包括：合成部件，其用于将根据通过所述第四确定部件确定的所述设置而拍摄的不可见光图像与所述可见光图像合成。3.根据权利要求1所述的图像处理设备，还包括：区域确定部件，其用于在所述可见光图像中确定要合成根据所述设置而拍摄的不可见光图像的目标区域。4.根据权利要求3所述的图像处理设备，其中所述区域确定部件基于与所述可见光图像有关的色调信息以及与已经同所述可见光图像一起拍摄的不可见光图像有关的色调信息来确定所述目标区域。5.根据权利要求4所述的图像处理设备，其中所述区域确定部件以通过分割所述可见光图像而产生的块为单位来确定所述目标区域，以及所述色调信息是各个块中的边缘强度的评价值。6.根据权利要求5所述的图像处理设备，其中所述区域确定部件将通过分割所述可见光图像而产生的多个块中的、评价值不大于第一阈值并且与所述不可见光图像中的相应块的评价值的差不小于第二阈值的块确定为所述目标区域。7.根据权利要求5所述的图像处理设备，其中所述区域确定部件将通过分割所述可见光图像而产生的多个块中的、被摄体距离不小于距离阈值的块确定为所述目标区域。8.根据权利要求5至7中任一项所述的图像处理设备，其中所述区域确定部件将通过分割所述可见光图像而产生的多个块中的由用户选择的块确定为所述目标区域。9.根据权利要求1至6中任一项所述的图像处理设备，其中所述第一确定部件根据所述可见光图像的亮度来确定所述第一目标值。10.根据权利要求9所述的图像处理设备，其中在所述可见光图像的亮度小于第三阈值的情况下，将所述第一目标值固定在第一值；以及在所述可见光图像的亮度大于第四阈值的情况下，将第一目标值固定在大于所述第一
值的第二值。11.根据权利要求10所述的图像处理设备，其中在所述可见光图像的亮度不小于所述第三阈值且不大于所述第四阈值的情况下，所述第一目标值具有与所述可见光图像的亮度相对应的值。12.根据权利要求1至6中任一项所述的图像处理设备，其中所述第二确定部件基于与所述可见光图像一起拍摄的不可见光图像的对比度来确定所述第二目标值。13...

【专利技术属性】
技术研发人员：山口彰太，久保裕纪子，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：