【技术实现步骤摘要】
本申请涉及终端，尤其涉及图像处理方法和相关装置。
技术介绍
1、目前，电子设备不仅可以支持拍摄功能、还可以支持对于拍摄画面的虚化处理，使得用户可以看到前景清晰背景模糊的虚化图像，使得拍摄画面具有较好的空间感。
2、然而，虚化图像可能出现边缘误虚的情况。
技术实现思路
1、本申请实施例提供一种图像处理方法和相关装置，应用于终端
该方法用于对前景的边缘进行处理，使得边缘清晰，进而减少虚化处理等背景处理时的边缘误虚等边缘不清晰的情况，提升图像处理效果。
2、第一方面，本申请实施例提出一种图像处理方法。该方法包括：获取第一图像；其中，第一图像中包括前景区域和过渡区域，过渡区域是前景区域和背景区域之间的过渡区域，第一图像中的过渡区域添加有噪声；将第一图像输入第一模型，得到第二图像；其中，第一模型用于在第一条件的约束下，去除第一图像中的噪声，其中，第一条件用于指示第一模型处理后图像的质量。
3、这样，根据第一条件指示的图像的质量对图像中过渡区域进行去噪处理，使得图像中过渡区域满足图像的质量要求，进而过渡区域中前景的边缘清晰。
4、在一种可能的实现方式中，第一条件包括文本特征，文本特征用于指示第一模型处理后图像的下述一项或多项参数：图像质量、分辨率、真实度、风格、图像中的对象。
5、这样，可以使得扩散模型处理后的图像与预期的图像参数相符。
6、在一种可能的实现方式中，获取第一图像，包括：获取第三图像；在第三图像的尺寸
7、在通过第一模型对图像进行处理前，可以对图像进行下采样，减少后续第一模型去噪处理的计算量。下采样后的图像可以满足第一模型对图像去噪的尺寸要求，减少计算量过大导致电子设备卡顿或不支持的情况。
8、通过编码器将下采样后的图像压缩到潜在空间，第一模型可以在潜在空间内进行去噪处理，进一步减少图像处理的计算量。在第一模型处理结束后，还可以通过编码器对处理后的图像进行解码，解码后的图像尺寸大于预设尺寸。这样，可以将第一模型处理后的图像恢复至下采样处理之前的尺寸。
9、在一种可能的实现方式中，获取第一图像，包括：获取第三图像；在第三图像的尺寸小于或等于预设尺寸的情况下，将第三图像输入编码器进行编码处理，得到编码后的第三图像；对编码后的第三图像中的过渡区域添加噪声，得到第一图像；得到第二图像后，方法还包括：将第二图像输入第二解码器进行解码处理，得到第五图像，第五图像的尺寸等于第三图像的尺寸。
10、在第三图像的尺寸小于或等于预设尺寸时可以不进行下采样处理。适应性的，通过另一个解码器对第一模型处理后的图像进行解码。
11、在一种可能的实现方式中，获取第三图像，包括：获取第六图像，第六图像包括：前景区域、过渡区域和背景区域；对第六图像进行裁剪处理，得到第三图像，第三图像包括：前景区域、过渡区域，以及部分背景区域；方法还包括：将第五图像融合到第六图像中得到目标图像。
12、这样，在通过第一模型对图像进行处理前，可以对图像进行裁剪，减少后续第一模型去噪处理的计算量。
13、在一种可能的实现方式中，对编码后的第四图像中的过渡区域添加噪声，得到第一图像，包括：利用三元图确定编码后的第四图像中的过渡区域的位置；对第四图像中的过渡区域添加噪声，得到第一图像。
14、三元图用于指示图像中的过渡区域。该三元图可以对应于下文中的三元图c、三元图b或三元图a。一些实施例中，可以根据三元图b以及下采样前后的图像之间的对应关系，确定编码后的第四图像中的过渡区域的位置。可以根据三元图a、裁剪前后的图像之间的对应关系、下采样前后的图像之间的对应关系，确定编码后的第四图像中的过渡区域的位置。本申请实施例对于三元图不做具体限定。
15、可以通过三元图确定图像中过渡区域的位置，进而准确对图像中的过渡区域添加噪声，减少对图像中除过渡区域之外的区域的干扰。
16、在一种可能的实现方式中，方法还包括：响应于拍照操作，得到第八图像；对第八图像进行背景处理，得到第三图像或第六图像。
17、第八图像可以为拍摄得到的图像。该方法可以应用在拍照场景中。例如，可以应用在人像模式下的拍照场景中，使得人像中的发丝清晰。
18、在一种可能的实现方式中，响应于拍照操作，得到第八图像，包括：响应于拍照操作，获取至少两个曝光时间不同的图像，对至少两个曝光时间不同的图像进行图像融合得到第八图像。
19、电子设备可以通过至少两个曝光时间不同的图像之间的图像融合，得到具有hdr效果的第一图像。
20、在一种可能的实现方式中，方法还包括：显示第一界面，第一界面显示有第九图像和第一控件；响应于针对第一控件的触发操作，对第九图像进行背景处理，得到第三图像或第六图像。
21、可以应用在图像的编辑场景中。
22、在一种可能的实现方式中，第一模型的训练过程包括：对第一训练图像添加噪声，生成噪声图像；在第一训练图像对应的第二条件的约束下预测噪声图像中的噪声，并从噪声图像中去除预测的噪声；第二条件用于指示第一训练图像的质量，第二条件还用于指示第一训练图像中的内容；在预测的噪声与对噪声图像包含的添加的噪声之间的差异满足第一损失函数时，得到第一模型。
23、第一训练图像可以对应于下文中的训练图像b。第二条件可以为下文中的图8所示的文本提示或文本特征。第一损失函数可以对应于下文中的损失函数loss5。
24、在一种可能的实现方式中，第一解码器的训练过程包括：对第三训练图像进行下采样处理，得到第四训练图像；将第四训练图像输入编码器进行编码处理，得到第五训练图像；将第五训练图像输入待训练的第一解码器进行解码处理，得到第二预测图像；在第二预测图像与第五训练图像之间的差异满足第二损失函数时，得到第一解码器。
25、第三训练图像可以对应于下文中的训练图像c，第四训练图像可以对应于下文中的训练图像d，第五训练图像可以对应于下文中训练图像d的特征图。第二损失函数可以对应于下文中的损失函数loss6。
26、在一种可能的实现方式中，在训练第一解码器之前，方法还包括：对待训练的第二解码器进行训练，得到第二解码器；设置待训练的第一解码器的参数与第二解码器的参数相同；其中，第二解码器的训练过程包括：将第四训练图像输入到编码器进行编码处理，得到第五训练图像；将第五训练图像输入待训练的第二解码器进行解码处理，得到第三预测图像；在第三预测图像与第四训练图像之间的差异满足第三损失函数时，得到第二解码器。
27、这本文档来自技高网...
【技术保护点】
1.一种图像处理方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，
3.根据权利要求1所述的方法，其特征在于，所述获取第一图像，包括：
4.根据权利要求1所述的方法，其特征在于，所述获取第一图像，包括：
5.根据权利要求3所述的方法，其特征在于，所述对编码后的所述第四图像中的所述过渡区域添加噪声，得到所述第一图像，包括：
6.根据权利要求3-5任一项所述的方法，其特征在于，所述获取第三图像，包括：
7.根据权利要求3-5任一项所述的方法，其特征在于，所述方法还包括：
8.根据权利要求3-5任一项所述的方法，其特征在于，所述方法还包括：
9.根据权利要求1-5任一项所述的方法，其特征在于，
10.根据权利要求1-5任一项所述的方法，其特征在于，第一解码器的训练过程包括：
11.根据权利要求10所述的方法，其特征在于，在训练所述第一解码器之前，所述方法还包括：对待训练的第二解码器进行训练，得到第二解码器；
12.根据权利要求1-5任一项
13.一种电子设备，其特征在于，所述电子设备包括：一个或多个处理器和存储器；
14.一种芯片系统，其特征在于，所述芯片系统应用于电子设备，所述芯片系统包括一个或多个处理器，所述一个或多个处理器用于调用计算机指令以使得所述电子设备执行如权利要求1至12中任一项所述的方法。
15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括计算机指令，当所述计算机指令在电子设备上运行时，使得所述电子设备执行如权利要求1至12中任一项所述的方法。
16.一种计算机程序产品，其特征在于，所述计算机程序产品包括计算机程序代码，当所述计算机程序代码在电子设备上运行时，使得所述电子设备执行如权利要求1至12中任一项所述的方法。
...【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：
2.根据权利要求1所述的方法，其特征在于，
3.根据权利要求1所述的方法，其特征在于，所述获取第一图像，包括：
4.根据权利要求1所述的方法，其特征在于，所述获取第一图像，包括：
5.根据权利要求3所述的方法，其特征在于，所述对编码后的所述第四图像中的所述过渡区域添加噪声，得到所述第一图像，包括：
6.根据权利要求3-5任一项所述的方法，其特征在于，所述获取第三图像，包括：
7.根据权利要求3-5任一项所述的方法，其特征在于，所述方法还包括：
8.根据权利要求3-5任一项所述的方法，其特征在于，所述方法还包括：
9.根据权利要求1-5任一项所述的方法，其特征在于，
10.根据权利要求1-5任一项所述的方法，其特征在于，第一解码器的训练过程包括：
11.根据权利要求10所述的方法，其特征在于，...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。