用于图像处理的方法、装置、设备和存储介质制造方法及图纸

技术编号:45869645 阅读:11 留言:0更新日期:2025-07-19 11:25
根据本公开的实施例,提供了用于图像处理的方法、装置、设备和存储介质。该方法包括获取第一参考图像的第一参考图像特征;基于第一参考图像特征、用于风格特征提取的第一预定提示和第一查询表示,确定第一参考图像的风格相关特征;以及基于第一参考图像的风格相关特征和指示目标图像内容的第一输入文本,生成第一目标图像,第一目标图像与第一参考图像的图像风格和目标图像内容相匹配。以此方式,可以将参考图像的风格特征与语义特征解耦。由此,可以有利地生成既具有参考图像风格又符合输入文本语义的图像。

【技术实现步骤摘要】

本公开的示例实施例总体涉及计算机领域,特别地涉及用于图像处理的方法、装置、设备和计算机可读存储介质。


技术介绍

1、在计算机视觉(cv)领域中,基于机器学习的各种图像生成技术已经得到显著发展,并且具有广泛应用。例如,在诸如社交、游戏、图像编辑等很多应用场景中期望生成和使用具有特定风格的图像。基于机器学习的图像生成技术可以用于这样的应用场景中,以提高图像生成效果。


技术实现思路

1、在本公开的第一方面,提供了一种图像处理方法。该方法包括:获取第一参考图像的第一参考图像特征;基于第一参考图像特征、用于风格特征提取的第一预定提示和第一查询表示,确定第一参考图像的风格相关特征;以及基于第一参考图像的风格相关特征和指示目标图像内容的第一输入文本,生成第一目标图像,第一目标图像与第一参考图像的图像风格和目标图像内容相匹配。

2、在本公开的第二方面,提供了一种用于图像处理的装置。该装置包括:第一图像特征提取模块,被配置为获取第一参考图像的第一参考图像特征;风格相关特征模块,被配置为基于第一参考图像特征、用于风格本文档来自技高网...

【技术保护点】

1.一种图像处理方法,包括:

2.根据权利要求1所述的方法,其中生成所述第一目标图像包括:

3.根据权利要求2所述的方法,其中利用第一模型生成所述第一目标图像特征包括:

4.根据权利要求3所述的方法,其中所述输入图像特征是利用第一转换单元而被转换为所述查询特征的,并且生成所述键特征和所述值特征包括:

5.根据权利要求4所述的方法,其中所述第一转换单元、所述第二转换单元和所述第三转换单元是通过第一训练模式得到的,并且所述第四转换单元和所述第五转换单元是通过不同于所述第一训练模式的第二训练模式得到的。

6.根据权利要求1所述的方法,...

【技术特征摘要】

1.一种图像处理方法,包括:

2.根据权利要求1所述的方法,其中生成所述第一目标图像包括:

3.根据权利要求2所述的方法,其中利用第一模型生成所述第一目标图像特征包括:

4.根据权利要求3所述的方法,其中所述输入图像特征是利用第一转换单元而被转换为所述查询特征的,并且生成所述键特征和所述值特征包括:

5.根据权利要求4所述的方法,其中所述第一转换单元、所述第二转换单元和所述第三转换单元是通过第一训练模式得到的,并且所述第四转换单元和所述第五转换单元是通过不同于所述第一训练模式的第二训练模式得到的。

6.根据权利要求1所述的方法,还包括:

7.根据权利要求6所述的方法,其中生成所...

【专利技术属性】
技术研发人员:齐天浩邬彦泽刘佳伟方山城刘玮
申请(专利权)人:北京字跳网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1