图像降噪方法、装置及电子设备制造方法及图纸

本申请提供一种图像降噪方法、装置及电子设备，应用于图像处理领域，其中，图像降噪方法包括：获取待降噪图像对应的第一处理图像；其中，第一处理图像的分辨率小于待降噪图像的分辨率；将第一处理图像以及与待降噪图像的前一帧图像对应的第一降噪图像输入运动检测模型中，得到运动检测模型输出的第一运动掩膜；根据与第一运动掩膜对应的第二运动掩膜对待降噪图像以及第一降噪图像进行融合，得到与待降噪图像对应的第二降噪图像；其中，第二运动掩膜的分辨率与待降噪图像的分辨率相同。在上述方案中，基于图像的低秩特性可知，在保证图像准确度的基础上，可以降低降噪过程中的运算量，从而保证整个图像处理流程中的帧率较高。从而保证整个图像处理流程中的帧率较高。从而保证整个图像处理流程中的帧率较高。

【技术实现步骤摘要】
图像降噪方法、装置及电子设备


[0001]本申请涉及图像处理
，具体而言，涉及一种图像降噪方法、装置及电子设备。

技术介绍

[0002]在图像采集装置的成像过程中，噪声水平成为影响图像质量的核心因素之一。举例来说，图像的噪声水平会显著影响人眼的观感和通过图像对信息的获取能力；以及，过高的噪声水平增加了后续图像结构化算法的错误率。
[0003]在现有技术中，一般通过深度神经网络来实现对图像的降噪。但是，由于深度神经网络往往需要很高的计算量，从而导致整个图像处理流程的帧率较低。

技术实现思路

[0004]本申请实施例的目的在于提供一种图像降噪方法、装置及电子设备，用以解决现有技术中整个图像处理流程的帧率较低的技术问题。
[0005]第一方面，本申请实施例提供一种图像降噪方法，包括：获取待降噪图像对应的第一处理图像；其中，所述第一处理图像的分辨率小于所述待降噪图像的分辨率；将所述第一处理图像以及与所述待降噪图像的前一帧图像对应的第一降噪图像输入运动检测模型中，得到所述运动检测模型输出的第一运动掩膜；根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像；其中，所述第二运动掩膜的分辨率与所述待降噪图像的分辨率相同。
[0006]在上述方案中，可以先对待降噪图像进行降低分辨率的处理，以得到对应的分辨率小于待降噪图像的分辨率的第一处理图像，再确定与该第一处理图像对应的第一运动掩膜。其中，基于图像的低秩特性可知，上述第一运动掩膜同样是待降噪图像对应的运动掩膜，这样，基于上述第一运动掩膜确定的第二降噪图像，在保证图像准确度的基础上，可以降低降噪过程中的运算量，从而保证整个图像处理流程中的帧率较高。
[0007]在可选的实施方式中，所述根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像，包括：将所述待降噪图像乘上预设边界值与所述第二运动掩膜的差值，得到第一融合图像，以及，将所述第一降噪图像乘上所述第二运动掩膜，得到第二融合图像；将所述第一融合图像与所述第二融合图像相加，得到所述第二降噪图像。在上述方案中，在基于第一运动掩膜确定第二降噪图像的过程中，通过保留上一帧没有运动的部分以及当前帧运动的部分，从而在保证运动区域正确的基础上，对待降噪图像进行降噪，得到准确度较高的第二降噪图像。此外，由于第一运动掩膜是将待降噪图像降低分辨率后确定的运动掩膜，基于图像的低秩特性，上述第一运动掩膜在保证准确度的基础上，可以降低运算量。因此，基于第一运动掩膜对图像进行降噪的过程中，可以保证图像的帧率较高。
[0008]在可选的实施方式中，在所述根据与所述第一运动掩膜对应的第二运动掩膜对所
述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像之后，所述方法还包括：获取所述第二降噪图像对应的第二处理图像；其中，所述第二处理图像的分辨率小于所述第二降噪图像；将所述第二处理图像以及所述第一运动掩膜输入第一降噪模型中，得到所述第一降噪模型输出的第三降噪图像；其中，所述第一降噪模型用于对所述第二处理图像中不同信噪比的区域进行不同降噪力度的降噪。在上述方案中，由于在确定第二降噪图像的过程中，主要对非运动区域进行降噪，从而导致在第二降噪图像中，非运动区域与运动区域的信噪比不同。因此，在第二降噪图像以及第一运动掩膜的基础上，可以基于第一运动掩膜对第二降噪图像中不同信噪比的区域进行不同降噪力度的降噪，从而有效提高视觉感官和图像整体信息量。
[0009]在可选的实施方式中，在所述根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像之后，所述方法还包括：将所述第二降噪图像输入第二降噪模型中，得到所述第二降噪模型输出的第四降噪图像；其中，所述第二降噪模型用于对所述第二降噪图像中的各个区域进行相同力度的降噪。在上述方案中，可以对第二降噪图像中各个区域进行相同力度的降噪，从而可以在第二降噪图像的基础上，对图像进行进一步的降噪，以提高降噪效果。
[0010]在可选的实施方式中，在所述将所述第二降噪图像输入第二降噪模型中，得到所述第二降噪模型输出的第四降噪图像之后，所述方法还包括：将与所述第三降噪图像对应的第五降噪图像以及所述第四降噪图像进行融合，得到第六降噪图像；其中，所述第五降噪图像的分辨率等于所述第四降噪图像的分辨率。在上述方案中，可以将对第二降噪图像中不同信噪比的区域进行不同降噪力度的降噪后得到的结果与对第二降噪图像中各个区域进行相同力度的降噪的结果进行融合，得到图像整体信息量较高且降噪效果较好的图像。
[0011]在可选的实施方式中，在所述根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像之后，所述方法还包括：将所述第二降噪图像输入第三降噪模型中，得到所述第三降噪模型输出的第七降噪图像；其中，所述第三降噪模型用于对所述第二降噪图像中的各个区域进行相同力度的降噪。在上述方案中，可以对第二降噪图像中各个区域进行相同力度的降噪，从而可以在第二降噪图像的基础上，对图像进行进一步的降噪，以提高降噪效果。
[0012]第二方面，本申请实施例提供一种图像降噪装置，包括：第一获取模块，用于获取待降噪图像对应的第一处理图像；其中，所述第一处理图像的分辨率小于所述待降噪图像的分辨率；第一输入模块，用于将所述第一处理图像以及与所述待降噪图像的前一帧图像对应的第一降噪图像输入运动检测模型中，得到所述运动检测模型输出的第一运动掩膜；第一融合模块，用于根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像；其中，所述第二运动掩膜的分辨率与所述待降噪图像的分辨率相同。
[0013]在上述方案中，可以先对待降噪图像进行降低分辨率的处理，以得到对应的分辨率小于待降噪图像的分辨率的第一处理图像，再确定与该第一处理图像对应的第一运动掩膜。其中，基于图像的低秩特性可知，上述第一运动掩膜同样是待降噪图像对应的运动掩膜，这样，基于上述第一运动掩膜确定的第二降噪图像，在保证图像准确度的基础上，可以降低降噪过程中的运算量，从而保证整个图像处理流程中的帧率较高。
[0014]在可选的实施方式中，所述第一融合模块具体用于：将所述待降噪图像乘上预设边界值与所述第二运动掩膜的差值，得到第一融合图像，以及，将所述第一降噪图像乘上所述第二运动掩膜，得到第二融合图像；将所述第一融合图像与所述第二融合图像相加，得到所述第二降噪图像。在上述方案中，在基于第一运动掩膜确定第二降噪图像的过程中，通过保留上一帧没有运动的部分以及当前帧运动的部分，从而在保证运动区域正确的基础上，对待降噪图像进行降噪，得到准确度较高的第二降噪图像。此外，由于第一运动掩膜是将待降噪图像降低分辨率后确定的运动本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像降噪方法，其特征在于，包括：获取待降噪图像对应的第一处理图像；其中，所述第一处理图像的分辨率小于所述待降噪图像的分辨率；将所述第一处理图像以及与所述待降噪图像的前一帧图像对应的第一降噪图像输入运动检测模型中，得到所述运动检测模型输出的第一运动掩膜；根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像；其中，所述第二运动掩膜的分辨率与所述待降噪图像的分辨率相同。2.根据权利要求1所述的图像降噪方法，其特征在于，所述根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像，包括：将所述待降噪图像乘上预设边界值与所述第二运动掩膜的差值，得到第一融合图像，以及，将所述第一降噪图像乘上所述第二运动掩膜，得到第二融合图像；将所述第一融合图像与所述第二融合图像相加，得到所述第二降噪图像。3.根据权利要求1或2所述的图像降噪方法，其特征在于，在所述根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像之后，所述方法还包括：获取所述第二降噪图像对应的第二处理图像；其中，所述第二处理图像的分辨率小于所述第二降噪图像；将所述第二处理图像以及所述第一运动掩膜输入第一降噪模型中，得到所述第一降噪模型输出的第三降噪图像；其中，所述第一降噪模型用于对所述第二处理图像中不同信噪比的区域进行不同降噪力度的降噪。4.根据权利要求3所述的图像降噪方法，其特征在于，在所述根据与所述第一运动掩膜对应的第二运动掩膜对所述待降噪图像以及所述第一降噪图像进行融合，得到与所述待降噪图像对应的第二降噪图像之后，所述方法还包括：将所述第二降噪图像输入第二降噪模型中，得到所述第二降噪模型输出的第四降噪图像；其中，所述第二降噪模型用于对所述第二降噪图像中的各个区域进行相同力度的降噪。5.根据权利要求4所述的图像降噪方法，其特征在于，在所述将所述第二降噪图像输入第...

【专利技术属性】
技术研发人员：刘建伟，
申请(专利权)人：爱芯元智半导体上海有限公司，
类型：发明
国别省市：