图像处理方法、装置、终端设备以及存储介质制造方法及图纸

技术编号:39320438 阅读:9 留言:0更新日期:2023-11-12 16:01
本申请涉及一种图像处理方法、装置、终端设备以及存储介质,涉及图像处理技术领域。该方法包括:获取待调整图像以及待调整图像的描述信息。根据描述信息对待调整图像进行迭代调整操作;其中,迭代调整操作包括:根据描述信息和上一合成图像,确定当前调整参数;根据当前调整参数,对上一合成图像中至少一个前景图像在背景图像中的位置信息进行调整,得到调整后的图像;上一合成图像为上一轮对待调整图像调整得到的;在迭代调整操作满足预设条件情况下,将迭代操作后的图像确定为目标合成图像。上述图像处理方法,基于描述信息对前景图像在背景图像中的位置和大小进行多次调整,从而使得目标合成图像与描述信息描述场景对应,提高了图像合成效果。了图像合成效果。了图像合成效果。

【技术实现步骤摘要】
图像处理方法、装置、终端设备以及存储介质


[0001]本申请涉及图像处理
,尤其涉及一种图像处理方法、装置、终端设备以及存储介质。

技术介绍

[0002]图像合成由于能够将来自不同图片的多个视觉元素合成到同一张图片上,以生成用户满意的图像,因此有着广泛的应用,比如虚拟社交领域、艺术创作领域、广告图片生成领域。
[0003]当前,图像合成的合成模型为生成性对抗网络(generative adversarial networks,GAN)模型。由于GAN模型对应的隐空间(噪声空间)的规律性和可解释性差因而导致图像合成的效果不可控,图像合成效果较差。

技术实现思路

[0004]本申请提供一种图像处理方法、装置、终端设备以及存储介质,以提高图像合成效果。本申请的技术方案如下:
[0005]本申请的第一方面,提供一种图像处理方法,方法包括:获取待调整图像以及待调整图像的描述信息,待调整图像为将至少一个前景图像叠加到背景图像上得到的;描述信息用于表示至少一个前景图像在背景图像中的期望位置。根据描述信息对待调整图像进行迭代调整操作。其中,迭代调整操作包括:根据描述信息和上一合成图像,确定当前调整参数;根据当前调整参数,对上一合成图像中至少一个前景图像在背景图像中的位置信息进行调整,得到调整后的图像;上一合成图像为上一轮对待调整图像调整得到的。在迭代调整操作满足预设条件的情况下,将迭代操作后的图像确定为目标合成图像。
[0006]在一种可能的实施方式中,根据描述信息和上一合成图像,确定当前调整参数,包括:将描述信息以及上一合成图像输入预设对比模型,输出目标匹配值;预设对比模型具备确定描述信息与图像之间的匹配值的功能,目标匹配值用于表示描述信息与上一合成图像的匹配程度。基于目标匹配值以及上一合成图像的图像特征值,确定当前调整参数。
[0007]在一种可能的实施方式中,基于目标匹配值以及上一合成图像的图像特征值,确定当前调整参数,包括:确定出目标匹配值与效果调节参数的乘积,并将乘积与图像特征值之和确定为当前调整参数;效果调节参数用于调整迭代调整操作中得到的图像的显示效果。
[0008]在一种可能的实施方式中,预设条件包括:所述迭代调整操作的次数小于第一阈值,且目标匹配值大于第二阈值。
[0009]在一种可能的实施方式中,方法还包括:根据至少一个前景图像中每个前景图像的初始位置信息,将至少一个前景图像叠加到背景图像上,得到待调整图像;前景图像的初始位置信息用于标识前景图像在背景图像的初始位置及尺寸。
[0010]在一种可能的实施方式中,方法还包括:获取多个样本图像以及每个样本图像对
应的加噪后的图像;根据多个样本图像中每个样本图像中的至少一个样本前景图像、样本背景图像、对应的加噪后的图像以及至少一个样本前景图像的位置信息,对初始神经网络模型进行迭代操作,得到神经网络模型,样本背景图像为将样本图像中的至少一个样本前景图像去除之后的图像。迭代操作包括:将一个加噪后的样本图像、至少一个样本前景图像以及样本背景图像输入初始神经网络模型,得到目标位置信息;目标位置信息用于表征迭代操作过程中得到图像中的前景图像的位置和尺寸。基于目标位置信息与对应的参考位置信息之间的差异信息,对初始神经网络模型进行训练,直至满足收敛条件;参考位置信息用于表征对应的样本图像中前景图像的位置信息。
[0011]第二方面,一种图像处理装置,装置包括:获取单元、处理单元以及确定单元;获取单元,用于获取待调整图像以及待调整图像的描述信息,待调整图像为将至少一个前景图像叠加到背景图像上得到的,且至少一个前景图像在背景图像上的位置信息与位置描述信息不一致;描述信息用于表示至少一个前景图像在背景图像中的期望位置。处理单元,用于根据描述信息对待调整图像进行迭代调整操作;其中,迭代调整操作包括:根据描述信息和上一合成图像,确定当前调整参数;根据当前调整参数,对上一合成图像中至少一个前景图像在背景图像中的位置信息进行调整,得到调整后的图像;上一合成图像为上一轮对待调整图像得到的。确定单元,用于在迭代调整操作满足预设条件的情况下,将迭代操作后的图像确定为目标合成图像。
[0012]在一种可能的实施方式中,确定单元,具体用于:将描述信息以及上一合成图像输入预设对比模型,输出目标匹配值;预设对比模型具备确定描述信息与图像之间的匹配值的功能,目标匹配值用于表示描述信息与上一合成图像的匹配程度。基于目标匹配值以及上一合成图像的图像特征值,确定当前调整参数。
[0013]在一种可能的实施方式中,确定单元,具体还用于:确定出目标匹配值与效果调节参数的乘积,并将乘积与图像特征值之和确定为当前调整参数;效果调节参数用于调整迭代调整操作中得到的图像的显示效果。
[0014]在一种可能的实施方式中,预设条件包括:所述迭代调整操作的次数小于第一阈值,且目标匹配值大于第二阈值。
[0015]在一种可能的实施方式中,处理单元,还用于根据至少一个前景图像中每个前景图像的初始位置信息,将至少一个前景图像叠加到背景图像上,得到待调整图像;前景图像的初始位置信息用于标识前景图像在背景图像的初始位置及尺寸。
[0016]在一种可能的实施方式中,获取单元,还用于:获取多个样本图像以及每个样本图像对应的加噪后的图像;处理单元,还用于根据多个样本图像中每个样本图像中的至少一个样本前景图像、样本背景图像、对应的加噪后的图像以及至少一个样本前景图像,对初始神经网络模型进行迭代操作,得到神经网络模型,样本背景图像为将样本图像中的至少一个样本前景图像去除之后的图像。迭代操作包括:将一个加噪后的样本图像、至少一个样本前景图像以及样本背景图像输入初始神经网络模型,得到目标位置信息;目标位置信息用于表征迭代操作过程中得到图像中的前景图像的位置和尺寸。基于目标位置信息与对应的参考位置信息之间的差异信息,对初始神经网络模型进行训练,直至满足收敛条件;参考位置信息用于表征对应的样本图像中前景图像的位置信息。
[0017]第三方面,提供一种终端设备,包括:处理器和通信接口;通信接口和处理器耦合,
处理器用于运行计算机程序或指令,以实现如第一方面的图像处理方法。
[0018]第四方面,提供一种计算机可读存储介质,计算机可读存储介质中存储有指令,当计算机执行该指令时,该计算机执行如第一方面的图像处理方法。
[0019]第五方面,提供一种计算机程序产品,计算机程序产品包括计算机指令,当计算机指令在终端设备上运行时,终端设备执行如第一方面的图像处理方法。
[0020]本申请提供了一种图像处理方法,带来以下有益效果:在获取待调整图像的情况下,基于描述信息和上一合成图像确定的当前调整参数,对前景图像在背景图像中的位置信息(位置以及尺寸)进行迭代调整,并在迭代调整操作满足预设条件的情况下,将当前位置信息对应的当前合成图像确定为目标合成图像。如此,利用描述信息和上一合成图像,确定当前调整参数,以调整合成图像,经过多次调整,从而使得本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法,其特征在于,所述方法包括:获取待调整图像以及所述待调整图像的描述信息,所述待调整图像为将至少一个前景图像叠加到背景图像上得到的;所述描述信息用于表示所述至少一个前景图像在所述背景图像中的期望位置;根据所述描述信息对所述待调整图像进行迭代调整操作;其中,所述迭代调整操作包括:根据所述描述信息和上一合成图像,确定当前调整参数;根据所述当前调整参数,对所述上一合成图像中所述至少一个前景图像在所述背景图像中的位置信息进行调整,得到调整后的图像;所述上一合成图像为上一轮对所述待调整图像调整得到的;在所述迭代调整操作满足预设条件的情况下,将迭代操作后的图像确定为目标合成图像。2.根据权利要求1所述的图像处理方法,其特征在于,所述根据所述描述信息和上一合成图像,确定当前调整参数,包括:将所述描述信息以及所述上一合成图像输入预设对比模型,输出目标匹配值;所述预设对比模型具备确定描述信息与图像之间的匹配值的功能,所述目标匹配值用于表示所述描述信息与所述上一合成图像的匹配程度;基于所述目标匹配值以及所述上一合成图像的图像特征值,确定所述当前调整参数。3.根据权利要求2所述的图像处理方法,其特征在于,所述基于所述目标匹配值以及所述上一合成图像的图像特征值,确定所述当前调整参数,包括:确定出所述目标匹配值与效果调节参数的乘积,并将所述乘积与所述图像特征值之和确定为所述当前调整参数;所述效果调节参数用于调整所述迭代调整操作中得到的图像的显示效果。4.根据权利要求2所述的图像处理方法,其特征在于,所述预设条件包括:所述迭代调整操作的次数小于第一阈值,且所述目标匹配值大于第二阈值。5.根据权利要求1

4中任一项所述的图像处理方法,其特征在于,所述方法还包括:根据至少一个前景图像中每个前景图像的初始位置信息,将所述至少一个前景图像叠加到所述背景图像上,得到所述待调整图像;所述前景图像的初始位置信息用于标识所述前景图像在所述背景图像的初始位置及尺寸。6.根据权利要求1

4中任一项所述的图像处理方法,其特征在于,所述方法还包括:获取多个样本图像以及每个样本图像对应的加噪后的图像;根据所述多个样本图像中每个样本图像中的至少一个样本前景图像、样本背景图像、对应的加噪后的图像以及所述至少一个样本前景图像的位置信息,...

【专利技术属性】
技术研发人员:李志航
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1