图像处理装置、方法、电子设备及存储介质制造方法及图纸

本申请公开了一种图像处理装置、方法、电子设备及存储介质，属于电子技术领域。该图像处理装置包括：图像信号分解装置，用于对第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号；人工智能AI处理器，用于对第一子图像信号进行第一图像信号处理，得到第三子图像信号；图像信号处理器ISP，用于对第二子图像信号进行第二图像信号处理，得到第四子图像信号；图像信号融合装置，用于对第三子图像信号和第四子图像信号进行融合处理，得到第二图像信号。本申请旨在降低图像处理过程中人工智能AI处理器的资源消耗。智能AI处理器的资源消耗。智能AI处理器的资源消耗。

【技术实现步骤摘要】
图像处理装置、方法、电子设备及存储介质


[0001]本申请涉及电子
，尤其涉及一种图像处理装置、方法、电子设备及存储介质。

技术介绍

[0002]图像信号处理器(Image Signal Processor，ISP)能够提供一系列的图像处理算法对图像传感器输出的图像信号进行处理，处理后的图像信号提供给后端继续处理。然而现有的图像信号处理器ISP提供的图像处理算法基本硬化，对图像处理具有局限性，为了提高图像处理效果，提出将传统的图像处理算法与人工智能技术(AI，Artificial Intelligence)相结合。例如，采用AI处理器替代实现图像信号处理器ISP中的某个或某几个功能。在上述方案中，AI处理器的数据处理复杂度较高，资源消耗较大。

技术实现思路

[0003]有鉴于此，本申请提供一种图像处理装置、方法、电子设备及存储介质，旨在降低图像处理过程中人工智能AI处理器的资源消耗。
[0004]本申请提供一种图像处理装置，包括：
[0005]图像信号分解装置，用于对第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号，所述第一图像信号是摄像装置输出的图像信号或者是基于摄像装置输出的图像信号获取的；
[0006]人工智能AI处理器，用于对所述第一子图像信号进行第一图像信号处理，得到第三子图像信号；
[0007]图像信号处理器ISP，用于对所述第二子图像信号进行第二图像信号处理，得到第四子图像信号；
[0008]图像信号融合装置，用于对所述第三子图像信号和所述第四子图像信号进行融合处理，得到第二图像信号。
[0009]在本申请的一种可能的实施方式中，所述图像信号处理器ISP包括多个级联的处理器模块，所述图像信号处理ISP还用于：
[0010]基于其一个或者多个处理器模块，继续对所述第二图像信号进行第三图像信号处理，并输出图像处理结果；
[0011]或者直接将所述第二图像信号作为输出的图像处理结果。
[0012]在本申请的一种可能的实施方式中，所述图像信号处理器ISP包括多个级联的处理器模块，所述图像信号处理器ISP还用于：
[0013]基于其一个或者多个处理器模块对摄像装置输出的图像信号进行第四图像信号处理，得到所述第一图像信号。
[0014]在本申请的一种可能的实施方式中，所述图像处理装置还包括：
[0015]控制装置，用于对所述第一图像信号进行分析处理，得到所述第一图像信号的属
性参数；
[0016]还用于基于所述属性参数，确定所述图像信号分解装置所对应的分解模式，并控制所述图像信号分解装置基于所述分解模式，对所述第一图像信号进行分解处理；
[0017]还用于基于所述属性参数，确定所述图像信号融合装置所对应的融合模式，并控制所述图像信号融合装置基于所述融合模式，对所述第三子图像信号和所述第四子图像信号进行融合处理。
[0018]在本申请的一种可能的实施方式中，所述属性参数包括以下至少一项：增益强度、噪声形态、运动/静止区域、曝光信息或者图像亮度，且所述属性参数与所述分解模式和/或者所述融合模式相对应；
[0019]所述控制装置用于基于所述属性参数，确定所述属性参数相对应的分解模式，作为所述图像信号分解装置所对应的分解模式；和/或
[0020]所述控制装置用于基于所述属性参数，确定所述属性参数相对应的融合模式，作为所述图像信号分解装置所对应的融合模式。
[0021]在本申请的一种可能的实施方式中，所述图像处理装置还包括：
[0022]存储器，用于在所述图像信号分解装置和所述图像信号处理器ISP之间转移所述第一子图像信号；
[0023]还用于在所述图像信号融合装置和所述图像信号处理器ISP之间转移所述第三子图像信号；
[0024]其中，所述存储器包括片上存储器或者片外存储器。
[0025]本申请提供一种图像处理方法，包括以下步骤：
[0026]对第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号，所述第一图像信号是摄像装置输出的图像信号或者是基于摄像装置输出的图像信号获取的；
[0027]对所述第一子图像信号进行第一图像信号处理，得到第三子图像信号；其中，所述第一图像信号处理由人工智能AI处理器执行；
[0028]对所述第二子图像信号进行第二图像信号处理，得到第四子图像信号；其中，所述第二图像信号处理由图像信号处理器ISP执行；
[0029]对所述第三子图像信号和所述第四子图像信号进行融合处理，得到第二图像信号。
[0030]在本申请的一种可能的实施方式中，所述图像信号处理器ISP包括多个级联的处理器模块，所述图像处理方法，还包括：
[0031]基于所述图像信号处理ISP的一个或者多个处理器模块，继续对所述第二图像信号进行第三图像信号处理，并输出图像处理结果；
[0032]或者直接将所述第二图像信号作为输出的图像处理结果。
[0033]在本申请的一种可能的实施方式中，所述图像信号处理器ISP包括多个级联的处理器模块，所述对第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号的步骤之前，还包括：
[0034]基于所述图像信号处理ISP的一个或者多个处理器模块对摄像装置输出的图像信号进行第四图像信号处理，得到所述第一图像信号。
[0035]在本申请的一种可能的实施方式中，所述对第一图像信号进行分解处理，得到第
一子图像信号和第二子图像信号的步骤之前，还包括：
[0036]对所述第一图像信号进行分析处理，得到所述第一图像信号的属性参数；
[0037]基于所述属性参数，确定与所述属性参数相对应的分解模式以及融合模式；
[0038]则所述对第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号的步骤，包括：
[0039]基于所述分解模式，对所述第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号；
[0040]则所述对所述第三子图像信号和所述第四子图像信号进行融合处理，得到第二图像信号的步骤，包括：
[0041]基于所述融合模式，对所述第三子图像信号和所述第四子图像信号进行融合处理，得到第二图像信号。
[0042]本申请提供一种电子设备，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的图像处理程序，所述图像处理程序配置为实现如上所述的图像处理方法的步骤。
[0043]本申请提供一种存储介质，所述存储介质上存储有图像处理程序，所述图像处理程序被处理器执行时实现如上所述的图像处理方法的步骤。
[0044]本申请公开了一种图像处理装置、方法、电子设备及存储介质，与现有技术中，采用AI处理器替代实现图像信号处理器ISP中的某个或某几个功能，导致AI处理器的数据处理复杂度较高，资源消耗较大相比，本申请包括：图像信号分解装置，用于对第一图像信号进行分本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理装置，其特征在于，包括：图像信号分解装置，用于对第一图像信号进行分解处理，得到第一子图像信号和第二子图像信号，所述第一图像信号是摄像装置输出的图像信号或者是基于摄像装置输出的图像信号获取的；人工智能AI处理器，用于对所述第一子图像信号进行第一图像信号处理，得到第三子图像信号；图像信号处理器ISP，用于对所述第二子图像信号进行第二图像信号处理，得到第四子图像信号；图像信号融合装置，用于对所述第三子图像信号和所述第四子图像信号进行融合处理，得到第二图像信号。2.如权利要求1所述的图像处理装置，其特征在于，所述图像信号处理器ISP包括多个级联的处理器模块，所述图像信号处理ISP还用于：基于其一个或者多个处理器模块，继续对所述第二图像信号进行第三图像信号处理，并输出图像处理结果；或者直接将所述第二图像信号作为输出的图像处理结果。3.如权利要求1所述的图像处理装置，其特征在于，所述图像信号处理器ISP包括多个级联的处理器模块，所述图像信号处理器ISP还用于：基于其一个或者多个处理器模块对摄像装置输出的图像信号进行第四图像信号处理，得到所述第一图像信号。4.如权利要求1至3任一项所述的图像处理装置，其特征在于，所述图像处理装置还包括：控制装置，用于对所述第一图像信号进行分析处理，得到所述第一图像信号的属性参数；还用于基于所述属性参数，确定所述图像信号分解装置所对应的分解模式，并控制所述图像信号分解装置基于所述分解模式，对所述第一图像信号进行分解处理；还用于基于所述属性参数，确定所述图像信号融合装置所对应的融合模式，并控制所述图像信号融合装置基于所述融合模式，对所述第三子图像信号和所述第四子图像信号进行融合处理。5.如权利要求4所述的图像处理装置，其特征在于，所述属性参数包括以下至少一项：增益强度、噪声形态、运动/静止区域、曝光信息或者图像亮度，且所述属性参数与所述分解模式和/或者所述融合模式相对应；所述控制装置用于基于所述属性参数，确定所述属性参数相对应的分解模式，作为所述图像信号分解装置所对应的分解模式；和/或所述控制装置用于基于所述属性参数，确定所述属性参数相对应的融合模式，作为所述图像信号分解装置所对应的融合模式。6.如权利要求1至3任一项所述的图像处理装置，其特征在于，所述图像处理装置还包括：存储器，用于在所述图像信号分解装置和所述图像信号处理器ISP之间转移所述第一子图像信号；
还用于在所述图像信号融合装置和所述图像信号处理器ISP之间转移所述第三子图像信号...

【专利技术属性】
技术研发人员：罗玉新，童耀宗，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：