一种双ISP协同和后端联动图像信号处理方法、系统技术方案

本申请涉及图像信号处理的领域，尤其是涉及一种双ISP协同和后端联动图像信号处理方法、系统，包括如下步骤：将所述RAW图像信息传输给第一图像处理模块；第一图像处理模块、第二图像处理模块均对RGB图像处理模式和YUV图像处理模式进行算法处理，并输出下一步RGB图像信息和下一步YUV图像信息至下一步图像处理模块；基于收到后端传输的区域信息，第一图像处理模块、第二图像处理模块对区域信息对应的图像位置进行处理，其中区域信息为RAW图像中需要进行参数调整的区域。本申请具有提高在高动态范围环境的图像质量的效果。动态范围环境的图像质量的效果。动态范围环境的图像质量的效果。

【技术实现步骤摘要】
一种双ISP协同和后端联动图像信号处理方法、系统


[0001]本申请涉及图像信号处理的领域，尤其是涉及一种双ISP协同和后端联动图像信号处理方法、系统。

技术介绍

[0002]ISP(Image Signal Processing) 图像信号处理。主要用来对前端图像传感器输出信号处理的单元，以匹配不同厂商的图像传感器。ISP分析图像传感器RAW图像亮度信息后，AE算法统计计算出数字增益、模拟增益、曝光时间、图像亮度等信息，ISP按统计信息不同数值自动曝光、空域降噪（2DNR），时域降噪（3DNR）、LTM、DRC、Sharpen等模块的部分图像调节参数划分为多组，以查表方式处理不同统计信息下的图像效果。
[0003]但是，一个ISP的图像调节参数分组数量（部分模块8组）无法覆盖到复杂高动态范围环境，由此会造成部分环境没有被图像调节参数覆盖，导致清晰度下降、噪点增加、图像动态范围下降等问题，从而影响图像质量。

技术实现思路

[0004]为了提高在高动态范围环境的图像质量，本申请提供一种双ISP协同和后端联动图像信号处理方法、系统。
[0005]第一方面，本申请提供的一种双ISP协同和后端联动图像信号处理方法，采用如下的技术方案：一种双ISP协同和后端联动图像信号处理方法，包括如下步骤：基于图像传感器获取RAW图像信息，且将所述RAW图像信息传输给第一图像处理模块；第一图像处理模块对RAW图像信息进行算法处理，并输出第一RGB图像信息至下一步图像处理模块基于获取后端的参数信息控制第一图像处理模块、第二图像处理模块修改参数组，其中，第一图像处理模块、第二图像处理模块均进入RGB图像处理模式和YUV图像处理模式，其中，图像处理模块可为多个；先第一图像处理模块对第一RGB图像信息进行算法处理，并输出第二RGB图像信息至下一步图像处理模块，第一图像处理模块然后对第一YUV图像信息进行算法处理，并输出第二YUV图像信息至下一步图像处理模块；第二图像处理模块对第二RGB图像信息进行算法处理，并输出下一步RGB图像信息至下一步图像处理模块，第二图像处理模块然后对第二YUV图像信息进行算法处理，并输出下一步YUV图像信息至下一步图像处理模块；基于收到后端传输的区域信息，第一图像处理模块、第二图像处理模块对区域信息对应的图像位置进行处理，其中区域信息为RAW图像中需要进行参数调整的区域。
[0006]通过采用上述技术方案，先通过第一图像处理模块对第一RGB图像信息和第一YUV
图像信息进行图像处理，然后通过第二图像处理模块对第二RGB图像信息和第二YUV图像信息进行图像处理，下一个图像处理模块可以对上一个图像处理模块传递过来的下一步RGB图像信息和下一步YUV图像信息通过算法进行相应的处理，相比于过往的单个图像处理模块，并且基于后端传递来的区域信息，多个图像处理模块通过调整自身的参数信息，能够对图像信息特定的位置进行聚焦调试，从而能够实现将局部区域进行图像处理，本申请的方案在能够能覆盖复杂的高动态范围环境同时，还能够进行局部提升清晰度，聚焦处理。
[0007]可选的，在所述第一图像处理模块对第一YUV图像信息进行算法处理和所述第二图像处理模块对第二YUV图像信息进行算法处理中，包括如下处理：伽玛校正、颜色校正矩阵、RGB伽玛、自动曝光、白平衡颜色空间变化等算法处理。
[0008]通过采用上述技术方案，在将图像信息经过伽玛校正、颜色校正矩阵、RGB伽玛、自动曝光、白平衡颜色空间变化等算法处理过后，能够将效果更佳的YUV图像信息往下传输。
[0009]可选的，在所述第一图像处理模块对第一RGB图像信息进行算法处理和所述第二图像处理模块对第二RGB图像信息进行算法处理中，包括如下处理：对多帧图像进行合成、色调和色彩饱和度控制、白平衡、自动曝光、空域降噪、时域降噪、边缘增强、局部对比度，动态范围压缩、假色等算法处理。
[0010]通过采用上述技术方案，在将图像信息经过对多帧图像进行合成、色调和色彩饱和度控制、白平衡、自动曝光、空域降噪、时域降噪、边缘增强、局部对比度，动态范围压缩、假色等算法处理过后，能够将效果更佳的RGB图像信息往下传输，从而提升图像的显示效果。
[0011]可选的，在所述基于获取后端的参数信息控制第一图像处理模块、第二图像处理模块修改参数组的过程中，进行如下步骤：调取第一图像处理模块的switch函数和第二图像处理模块的switch函数，修改第一图像处理模块的switch函数对应的参数信息和第二图像处理模块的switch函数对应的参数信息。
[0012]通过采用上述技术方案，通过在获取后端的参数信息之后，通过及时调整图像处理模块中switch函数的参数信息，以便于后续图像处理模块对对应的图像信息进行更加合理的算法处理。
[0013]可选的，在所述收到后端传输的区域信息步骤之前，还进行如下步骤：所述switch函数的图像调节参数组预设有默认参数组，其中，图像调节参数组中包括C1，C2，C3，C4，C5，且图像调节参数组内的参数数量可以进行修改，且默认参数组为图像调节参数组中初始默认参数；在所述收到后端传输的区域信息步骤之后，对区域信息进行3帧感兴趣区域图像统计信息处理，其中包括高亮度值，低亮度值，直方图信息等统计信息，其中，每个统计信息对应有图像调节参数组。
[0014]通过采用上述技术方案，通过预设的默认参数组以及设置不同的统计信息，系统在接收后台不同的信息，可以根据统计信息得匹配，及时准确的进行参数调整。
[0015]可选的，在所述控制第一第一图像处理模块、第二图像处理模块对区域信息对应的图像位置进行处理，进行如下步骤：基于所述区域信息获取RAW图像信息中对应的目标坐标信息；
基于收到后端传输的统计信息调取对应的目标图像调节参数组；控制第一图像处理模块的switch函数和第二图像处理模块的switch函数均切换到目标图像调节参数组；控制均进行切换图像调节参数后的第一图像处理对应的RGB图像信息以及YUV图像信息进行算法处理。
[0016]通过采用上述技术方案，通过确定的目标坐标信息，并且通过后端传递的统计信息，经过调整switch函数中的图像调节参数组，及时将switch函数切换到图像调节参数组，并且图像信息上特定的位置快速且精确对图像信息进行算法处理，从而能够实现局部提升清晰度，聚焦处理。
[0017]第二方面，第一方面，本申请提供的一种双ISP协同和后端联动图像信号处理系统，采用如下的技术方案：一种双ISP协同和后端联动图像信号处理系统，包括：传输模块，基于图像传感器获取RAW图像信息，用于将所述RAW图像信息传输给第一图像处理模块；第一RAW图像处理模块，第一图像处理模块对RAW图像信息进行算法处理，并输出第一RGB图像信息至下一步图像处理模块第一控制模块，基于获取后端的参数信息用于控制第一图像处理模块、第二图像处理模块修改参数组，其中，第一图像处理模块、第二图像处理模块均进入RGB图像处理模式和YUV图像处本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种双ISP协同和后端联动图像信号处理方法，其特征在于，包括如下步骤：基于图像传感器获取RAW图像信息，且将所述RAW图像信息传输给第一图像处理模块；第一图像处理模块对RAW图像信息进行算法处理，并输出第一RGB图像信息至下一步图像处理模块；基于获取后端的参数信息控制第一图像处理模块、第二图像处理模块修改参数组，其中，第一图像处理模块、第二图像处理模块均进入RGB图像处理模式和YUV图像处理模式，其中，图像处理模块可为多个；第一图像处理模块先对第一RGB图像信息进行算法处理，并输出第二RGB图像信息至下一步图像处理模块，第一图像处理模块然后对第一YUV图像信息进行算法处理，并输出第二YUV图像信息至下一步图像处理模块；第二图像处理模块对第二RGB图像信息进行算法处理，并输出下一步RGB图像信息至下一步图像处理模块，第二图像处理模块然后对第二YUV图像信息进行算法处理，并输出下一步YUV图像信息至下一步图像处理模块；基于收到后端传输的区域信息，第一图像处理模块、第二图像处理模块对区域信息对应的图像位置进行处理，其中区域信息为RAW图像中需要进行参数调整的区域。2.根据权利要求1所述的一种双ISP协同和后端联动图像信号处理方法，其特征在于，在所述第一图像处理模块对第一YUV图像信息进行算法处理和所述第二图像处理模块对第二YUV图像信息进行算法处理中，包括如下处理：伽玛校正、颜色校正矩阵、RGB伽玛、自动曝光、白平衡颜色空间变化等算法处理。3.根据权利要求2所述的一种双ISP协同和后端联动图像信号处理方法，其特征在于，在所述第一图像处理模块对第一RGB图像信息进行算法处理和所述第二图像处理模块对第二RGB图像信息进行算法处理中，包括如下处理：对多帧图像进行合成、色调和色彩饱和度控制、白平衡、自动曝光、空域降噪、时域降噪、边缘增强、局部对比度，动态范围压缩、假色等算法处理。4.根据权利要求1所述的一种双ISP协同和后端联动图像信号处理方法，其特征在于，在所述基于获取后端的参数信息控制第一图像处理模块、第二图像处理模块修改参数组的过程中，进行如下步骤：调取第一图像处理模块的switch函数和第二图像处理模块的switch函数，修改第一图像处理模块的switch函数对应的参数信息和第二图像处理模块的switch函数对应的参数信息。5.根据权利要求1所述的一种双ISP协同和后端联动图像信号处理方法，其特征在于，在所述收到后端传输的区域信息步骤之前，还进行如下步骤：所述switch函数的图像调节参数组预设有默认参数组，其中，图像调节参数组中包括C1，C2，C3，C4，C5，且图像调节参数组内的参数数量可以进行修改，且默认参数组为图像调节参数组中初始默认参数；在所述收到后端传输的区域信息步骤之后，对区域信息...

【专利技术属性】
技术研发人员：吴剑，何一凡，文志辉，
申请(专利权)人：厦门瑞为信息技术有限公司，
类型：发明
国别省市：