一种用于ISP的实时自动超参数优化方法和系统技术方案

本发明专利技术属于图像信号处理技术领域，具体为用于ISP硬件系统的实时自动超参数优化方法及系统。本发明专利技术包括构建参数网络ParaNet和ISP代理模型；参数网络ParaNet采用DNN模型，通过学习原始图像到超参数的映射过程，实现快速准确的参数预测；参数网络的输入为原始图像，输出为一组ISP超参数；ISP代理模型采用8层U型结构的多尺度残差连接3*3卷积层网络结构；超参数优化方法包括模拟不可微分的ISP硬件、将原始图像映射为ISP超参数、在线调优；本发明专利技术自动超参数优化系统采用ParaNet和ISP双通路架构，实现实时处理。在FPGA和ASIC上进行验证表明，本发明专利技术具有实用性，并有高性能，在保持高精度和高速度的同时，实现实时在线ISP参数搜索和图像处理。

【技术实现步骤摘要】

本专利技术属于图像信号处理，具体涉及用于isp硬件系统的实时自动超参数优化方法及系统。

技术介绍

1、图像信号处理(isp)硬件系统的主要任务是将相机传感器捕获的光电信号转换为标准的rgb图像，以供后续的图像分析和处理使用。在这一过程中，isp硬件需要执行复杂的图像处理算法，包括去噪、去马赛克、自动白平衡、色彩校正、锐化等。算法效果很大程度上依赖于多个超参数的设置，例如去噪强度、白平衡系数等。

2、目前，isp硬件系统的参数调优依赖于人工经验。工程师手动调整各个超参数，以期望获得最佳的图像质量。这种方法不仅耗时费力，而且对工程师的专业知识和经验要求较高。此外，手动调优往往针对特定的拍摄场景，难以适应实际应用中复杂多变的环境。为了解决手动调优的不足，近年来研究人员提出了一些自动调优的方法。例如，一些方法利用图像质量评估指标作为损失函数，训练神经网络模型来自动生成isp参数。然而，这些方法大多依赖于离线训练和优化，无法在实时应用中动态调整isp参数，难以适应实际应用中的实时变化场景。

3、此外，随着智能边缘设备的广泛应用，isp硬件系统本文档来自技高网...

【技术保护点】

1.一种用于ISP的实时自动超参数优化方法，其特征在于，包括构建一个参数网络ParaNet和一个ISP代理模型；其中：

2.一种基于权利要求1所述实时自动超参数优化方法的实时自动超参数优化系统，其特征在于，采用双通路硬件架构，具体包括ParaNet和ISP两个通路，两个通路并行执行，以实现实时处理；

【技术特征摘要】

1.一种用于isp的实时自动超参数优化方法，其特征在于，包括构建一个参数网络paranet和一个isp代理模型；其中：

2.一种基于权利要求1所...

【专利技术属性】
技术研发人员：范益波，刘家明，荆明娥，
申请(专利权)人：复旦大学，
类型：发明
国别省市：