【技术实现步骤摘要】
图像处理方法、装置、电子设备及存储介质
[0001]本专利技术涉及图像处理
,尤其涉及一种图像处理方法、装置、电子设备及存储介质。
技术介绍
[0002]在相关技术中,对图像添加文字的方式主要是通过人工参与完成的。例如利用手机软件给图像添加文字时,都是需要人工选定相应的字体形状,从而才能完成对图像添加文字的目的。
[0003]因此,相关技术中对图像添加文字的方式无法实现自动添加合适字体的目的,从而导致对图像添加文字的效率低的技术问题。
技术实现思路
[0004]本专利技术实施例的目的是提供一种图像处理方法、装置、电子设备及存储介质,以解决对图像添加文字的效率低的技术问题。
[0005]第一方面,本专利技术实施例提供了一种图像处理方法,包括:获取待处理图像、待处理文本信息以及字形图像,所述待处理文本信息包括目标文本信息,所述目标文本信息为所述待处理文本信息中至少部分文本信息,所述字形图像包括目标字体形状,所述字形图像用于定义所述目标文本信息的字体形状;将所述待处理图像作为输入数据,将所述待 ...
【技术保护点】
【技术特征摘要】
1.一种图像处理方法,其特征在于,包括:获取待处理图像、待处理文本信息以及字形图像,所述待处理文本信息包括目标文本信息,所述目标文本信息为所述待处理文本信息中至少部分文本信息,所述字形图像包括目标字体形状,所述字形图像用于定义所述目标文本信息的字体形状;将所述待处理图像作为输入数据,将所述待处理文本信息以及所述字形图像作为条件特征数据,输入至训练后的图像生成模型中进行图像生成处理,得到含有目标文本信息的目标文本图像;其中,所述目标文本图像中包括所述目标文本信息,所述目标文本信息在所述目标文本图像中的字体形状为所述目标字体形状。2.如权利要求1所述的方法,其特征在于,所述训练后的图像生成模型包括自编码子模型、图文编码子模型以及特征融合子模型,所述自编码子模型包括编码器模块和解码器模块;所述将所述待处理图像作为输入数据,将所述待处理文本信息以及所述字形图像作为条件特征数据,输入至训练后的图像生成模型中进行图像生成处理,得到含有目标文本信息的目标文本图像,包括:将所述待处理图像输入至所述编码器模块中进行第一编码处理,得到第一图像向量;将所述待处理文本信息和所述字形图像输入至所述图文编码子模型中进行第二编码处理,得到第一文本向量和第二图像向量;根据所述第一图像向量确定所述特征融合子模型的输入数据,并将所述第一文本向量和所述第二图像向量作为所述特征融合子模型的条件特征数据;将所述输入数据和所述条件特征数据输入至所述特征融合子模型中进行特征融合处理,得到目标特征向量;将所述目标特征向量输入至所述解码器模块中进行解码处理,得到含有目标文本信息的目标文本图像。3.如权利要求2所述的方法,其特征在于,所述特征融合子模型包括交叉注意力模块;所述将所述输入数据和所述条件特征数据输入至所述特征融合子模型中进行特征融合处理,得到目标特征向量,包括:将所述输入数据输入至所述特征融合子模型中进行卷积处理,得到卷积特征;将所述条件特征数据映射到所述卷积处理的过程中,得到所述条件特征数据对应的中间表示向量;将所述中间表示向量作为交叉注意力计算的键值,并根据所述交叉注意力模块对所述卷积特征和所述条件特征数据进行所述交叉注意力计算,得到目标特征向量。4.如权利要求3所述的方法,其特征在于,所述将所述中间表示向量作为交叉注意力计算的键值,并根据所述交叉注意力模块对所述卷积特征和所述条件特征数据进行所述交叉注意力计算,得到目标特征向量,包括:将所述中间表示向量作为交叉注意力计算的键值,并根据所述交叉注意力模块对所述卷积特征和所述条件特征数据进行所述交叉注意力计算,得到初始特征向量;对所述初始特征向量进行降噪处理,得到目标特征向量。5.如权利要求2所述的方法,其特征在于,所述训练后的图像生成模型还包括文本掩码
预测子模型;在所述根据所述第一图像向量确定所述特征融合子模型的输入数据的步骤之前,所述方法还包括:将所述待处理图...
【专利技术属性】
技术研发人员:张韵璇,
申请(专利权)人:腾讯科技深圳有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。