【技术实现步骤摘要】
本专利技术涉及用于图像处理的方法，特别地涉及降噪。此外，本专利技术涉及实施这种方法的装置和包括这种装置的终端设备。此外，本专利技术还涉及软件。
技术介绍
1、存在很多方法以降低图像的噪声。其中，特别是在现代移动设备中，使用多帧降噪管道，其中单个场景的多个帧被获取并叠加或融合以降低噪声。因此，通过将图像的像素与来自任何其他帧的像素进行组合，可以减少图像中像素的噪声。此方法对场景中的非移动对象效果很好，但仍然可能导致模糊的特征边缘。随着人工智能(ai)的到来，用于降噪的算法也被熟知。特别地，对于多帧降噪，将相同或相似场景的数个帧输入到ai算法中，并对ai算法进行充分的训练，以降低噪声。然而，由于ai算法依赖于多个帧，必须处理大量的数据，并且ai算法背后的神经网络变得庞大和缓慢。
技术实现思路
1、因此，本专利技术的目的是提供一种用于图像处理的方法，特别是具有改进的降噪性能的降噪的方法。
2、通过根据权利要求1所述的方法，根据权利要求13所述的装置，根据权利要求14所述的终端设备和根据权利要求15所述的软件存储设备来解决问题。
3、根据本专利技术的用于图像处理特别是降噪的方法包括以下步骤：
4、优选地通过图像传感器获取多个帧；
5、确定每个帧的噪声信息；
6、将多个帧组合为组合图像；
7、从每个帧的噪声信息确定组合图像的残差噪声图；以及
8、基于残差噪声图对组合图像进行降噪，以生成最终的图像估计。
...【技术保护点】
1.一种用于图像处理的方法，特别是用于降噪的方法，包括：
2.根据权利要求1所述的方法，其中通过经训练的神经网络进行组合图像的降噪，其中神经网络接收组合图像以及残差噪声图以生成最终的图像估计。
3.根据权利要求2所述的方法，其中神经网络通过训练图像以及一个或多个训练残差噪声图训练，其中训练图像包括基于训练残差噪声图的合成噪声。
4.根据权利要求1至3中任何一个所述的方法，其中残差噪声图包含组合图像的空间变化的噪声信息。
5.根据权利要求1至4中任何一个所述的方法，其中从每个帧的噪声信息确定组合图像的残差噪声图包含调整帧的重叠区域/像素的噪声信息。
6.根据权利要求1至5中任何一个所述的方法，其中残差噪声图包含逐像素的噪声信息。
7.根据权利要求1至6中任何一个所述的方法，其中噪声信息包括噪声分布，优选是高斯分布、泊松分布或其混合，其中特别地，噪声信息是一阶统计矩以及二阶统计矩。
8.根据权利要求1至7中任何一个所述的方法，其中，在基于残差噪声图降低组合图像的噪声以生成最终图像估计之前，至少部分地操
9.根据权利要求8所述的方法，其中操作残差噪声图被应用于一个或多个感兴趣区域，其中感兴趣区域优选地由用户指示或被检测。
10.根据权利要求9所述的方法，其中感兴趣区域包括面部、前景对象、背景中的一个或多个。
11.根据权利要求1至10中任何一个所述的方法，其中多个帧是不同时间的场景的至少部分重叠的图像。
12.根据权利要求1至11中任何一个所述的方法，其中在硬件中实现将多个帧组合为组合图像，和/或其中在软件中实现从每个帧的噪声信息确定组合图像的残差噪声图。
13.一种包括存储器以及处理器的装置，其中存储器存储指令，当处理器执行所述指令时，执行根据权利要求1至12中任何一个所述的方法的步骤。
14.一种终端设备，包括获取多个帧的图像传感器以及根据权利要求13所述的装置。
15.一种软件存储设备，存储指令，当由处理器执行指令时，执行根据权利要求1至12中任何一个所述的方法的步骤。
...【技术特征摘要】
1.一种用于图像处理的方法，特别是用于降噪的方法，包括：
2.根据权利要求1所述的方法，其中通过经训练的神经网络进行组合图像的降噪，其中神经网络接收组合图像以及残差噪声图以生成最终的图像估计。
3.根据权利要求2所述的方法，其中神经网络通过训练图像以及一个或多个训练残差噪声图训练，其中训练图像包括基于训练残差噪声图的合成噪声。
4.根据权利要求1至3中任何一个所述的方法，其中残差噪声图包含组合图像的空间变化的噪声信息。
5.根据权利要求1至4中任何一个所述的方法，其中从每个帧的噪声信息确定组合图像的残差噪声图包含调整帧的重叠区域/像素的噪声信息。
6.根据权利要求1至5中任何一个所述的方法，其中残差噪声图包含逐像素的噪声信息。
7.根据权利要求1至6中任何一个所述的方法，其中噪声信息包括噪声分布，优选是高斯分布、泊松分布或其混合，其中特别地，噪声信息是一阶统计矩以及二阶统计矩。
8.根据权利要求1至7中任何一个所述的方法，其中，在基于残差噪声图降低组合图像的噪声以生成最终图像...
【专利技术属性】
技术研发人员：塔皮奥·曼尼宁，阿拉姆·丹尼尔扬，塔皮奥·芬尼拉，佩特里·基伦拉赫蒂，杰斯珀·格拉纳特，拉斯·兰皮宁，穆罕默德·阿迪尔·瓦里斯，倪星洋，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。