面向机器视觉的图像处理系统、构建方法及相关产品技术方案

本披露公开了一种面向机器视觉的图像处理系统、构建面向机器视觉的图像处理系统的方法及相关产品。该图像处理系统可以实现为计算装置包括在组合处理装置中，该组合处理装置还可以包括接口装置和其他处理装置。该计算装置与其他处理装置进行交互，共同完成用户指定的计算操作。组合处理装置还可以包括存储装置，该存储装置分别与计算装置和其他处理装置连接，用于存储该计算装置和其他处理装置的数据。本披露的方案提供了一种新型的图像处理系统框架，其可以面向机器视觉任务，由此针对性地提高机器感知系统的检测性能。地提高机器感知系统的检测性能。地提高机器感知系统的检测性能。

【技术实现步骤摘要】
面向机器视觉的图像处理系统、构建方法及相关产品


[0001]本披露一般地涉及计算机视觉领域。更具体地，本披露涉及面向机器视觉的图像处理系统、构建面向机器视觉的图像处理系统的方法、计算装置、计算机可读存储介质和计算机程序产品。

技术介绍

[0002]ISP(Image Signal Processor)，即图像信号处理器，主要作用是对前端图像传感器输出的信号做后期处理，这些后期处理主要有线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等。ISP技术在很大程度上决定了摄像机的成像质量。依赖于ISP，可以在不同的光学条件下都能较好的还原现场细节。
[0003]传统ISP的目标是让图像在显示器上还原真实的场景，或者让图像愉悦人眼。随着机器视觉技术的发展，很多产品不需要安装显示器，如机器人、园区自动驾驶小车、智能摄像头等。采集的数据要经过ISP的整个过程，但传统的ISP处理过程因目的不一样，往往在动态范围校正(DRC)、去噪、增强等模块丢失很多有用的语义信息。
[0004]因此，亟需一种面向机器视觉的图像处理系统，以针对性提高机器本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向机器视觉的图像处理系统，包括：图像数据处理子系统，用于对图像数据进行后期处理；以及机器感知子系统，用于基于所述图像数据处理子系统输出的图像数据执行机器视觉任务；其中所述图像数据处理子系统包括与所述机器感知子系统联合训练得到的机器学习网络。2.根据权利要求1所述的系统，其中所述机器学习网络在所述联合训练之前，经过预训练以得到所述机器学习网络的初始化权重，所述初始化权重实现接近以下一项或多项的后期处理功能：色调映射、去噪和增强。3.根据权利要求2所述的系统，其中所述机器学习网络包括以下任一形式：数据压缩网络与数据增强网络的组合，其中所述数据压缩网络实现色调映射的后期处理功能，所述数据增强网络实现去噪和/或增强的后期处理功能；仅数据压缩网络，并且所述数据压缩网络实现色调映射的后期处理功能；或者数据压缩增强网络，并且所述数据压缩增强网络同时实现色调映射以及去噪和/或增强的后期处理功能。4.根据权利要求3所述的系统，其中所述预训练包括以下任一或多项：利用对应所需的后期处理功能的图像对，对所述机器学习网络中的各个网络分别进行监督训练，以初始化所述机器学习网络中各个网络的权重；和/或利用经过训练的教练网络，对所述机器学习网络中所有网络联合进行自监督训练，以初始化所述机器学习网络的权重。5.根据权利要求4所述的系统，其中所述监督训练包括：利用对应色调映射算法的图像对，对所述数据压缩网络进行监督训练，以初始化所述数据压缩网络的权重；利用对应去噪算法和/或增强算法的图像对，对所述数据增强网络进行监督训练，以初始化所述数据增强网络的权重；或者利用对应色调映射算法以及去噪算法和/或增强算法的图像对，对所述数据压缩增强网络进行监督训练，以初始化所述数据压缩增强网络的权重。6.根据权利要求4
‑
5任一所述的系统，其中所述自监督训练包括：锁定所述教练网络的权重，根据所述教练网络的损失函数反向传播至所述机器学习网络中的所有网络，以更新所述机器学习网络中各个网络的权重。7.根据权利要求1
‑
6任一所述的系统，其中所述机器感知子系统包括具有header层的网络结构，并且通过所述联合训练，精调所述机器学习网络的权重和所述header层的权重。8.根据权利要求1
‑
7任一所述的系统，其中所述机器学习网络采用输出为图像的类HDRnet的图像变换网络结构或类u
‑
net的全卷积网络结构。9.根据权利要求1
‑
8任一所述的系统，其中所述图像数据处理子系统还包括数据修复单元，用于修复采集所述图像数据的器件的物理缺陷。10.一种构建面向机器视觉的图像处理系统的方法，其中所述图像处理系统包括用于对图像数据进行后期处理的图像数据处理子系统和用于基于所述图像数据处理子系统输出的图像数据执行机器视觉任务的机器感知子系统，所述方法包括：
结合所述机器感知子系统，对所述图像数据处理子系统中的机器学习...

【专利技术属性】
技术研发人员：请求不公布姓名，
申请(专利权)人：中科寒武纪科技股份有限公司，
类型：发明
国别省市：