图像生成方法、图像生成模型的训练方法和计算设备技术

技术编号:45438519 阅读:12 留言:0更新日期:2025-06-04 19:19
本申请公开了一种图像生成方法、图像生成模型的训练方法和计算设备,涉及大模型技术、图像处理领域。其中,该方法包括:获取目标对象的第一图像和目标元素的第二图像;基于变分编码器对第一图像进行编码得到第一编码特征,并基于变分编码器对第二图像进行编码得到第二编码特征;利用特征交互模型对第一编码特征和第二编码特征进行特征交互,得到第一图像对应的第一特征表示,以及第二图像对应的第二特征表示;对第一特征表示和第二特征表示进行拼接,得到拼接编码特征;利用特征增强模型对拼接编码特征进行特征增强,得到目标编码特征;基于变分解码器对目标编码特征进行解码,得到目标图像。

【技术实现步骤摘要】

本申请涉及大模型技术、图像处理领域,具体而言,涉及一种图像生成方法、图像生成模型的训练方法和计算设备


技术介绍

1、随着虚拟试衣技术的发展,用户可以通过虚拟试衣技术,在虚拟环境中查看模特穿戴不同物品时所呈现出的效果。但是目前的虚拟试衣技术通常无法充分地捕捉到模特所处图像和物品所处图像中的图像细节,导致通过虚拟试衣技术生成的目标图像可能会存在质量较差的问题。

2、针对上述的问题,目前尚未提出有效的解决方案。


技术实现思路

1、本申请实施例提供了一种图像生成方法、图像生成模型的训练方法和计算设备,以至少解决相关技术中进行虚拟试衣时生成的试衣图像的质量较差的技术问题。

2、根据本申请实施例的一个方面,提供了一种图像生成方法,包括:获取目标对象的第一图像和目标元素的第二图像,其中,目标元素用于表征待添加到目标对象上的元素;基于变分编码器对第一图像进行编码得到第一编码特征,并基于变分编码器对第二图像进行编码得到第二编码特征;利用特征交互模型对第一编码特征和第二编码特征进行特征交互,得到第一图像本文档来自技高网...

【技术保护点】

1.一种图像生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述特征交互模型包括:至少一个双流层处理模块,所述利用特征交互模型对所述第一编码特征和所述第二编码特征进行特征交互,得到所述第一图像对应的第一特征表示,以及所述第二图像对应的第二特征表示,包括:

3.根据权利要求2所述的方法,其特征在于,所述利用任意一个双流层处理模块对接收到的第一输入特征和第二输入特征进行特征交互,得到所述任意一个双流层处理模块的第一输出特征,以及所述任意一个双流层处理模块的第二输出特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述对所述输入...

【技术特征摘要】

1.一种图像生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述特征交互模型包括:至少一个双流层处理模块,所述利用特征交互模型对所述第一编码特征和所述第二编码特征进行特征交互,得到所述第一图像对应的第一特征表示,以及所述第二图像对应的第二特征表示,包括:

3.根据权利要求2所述的方法,其特征在于,所述利用任意一个双流层处理模块对接收到的第一输入特征和第二输入特征进行特征交互,得到所述任意一个双流层处理模块的第一输出特征,以及所述任意一个双流层处理模块的第二输出特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述对所述输入特征进行向量抽取,得到所述输入特征对应的多个第一特征向量,包括:

5.根据权利要求4所述的方法,其特征在于,所述第一特征调整参数包括:第一尺度参数、第一位移参数、线性变换和标准化处理参数;所述基于所述第一特征调整参数对所述输入特征进行向量抽取,得到所述多个第一特征向量,包括:

6.根据权利要求4所述的方法,其特征在于,所述第一特征调整参数包括:向量调整参数;所述基于与所述分拆向量匹配的注意力机制对所述分拆向量进行注意力处理,得到所述输入特征对应的输出特征,包括:

7.根据权利要求3所述的方法,其特征在于,所述向量类型包括:查询向量、键向量和值向量;所述基于不同特征向量对应的向量类型对所述多个第一特征向量进行融合,得到第一融合特征向量,包括:

8.根据权利要求1所述的方法,其特征在于,所述特征增强模型包括:至少一个单流层处理模块;所述利用特征增强模型对所述拼接编码特征进行特征...

【专利技术属性】
技术研发人员:童一帆周昊尚文祥
申请(专利权)人:阿里巴巴华东有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1