System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像处理方法及装置制造方法及图纸_技高网

图像处理方法及装置制造方法及图纸

技术编号:40256437 阅读:9 留言:0更新日期:2024-02-02 22:48
本说明书实施例提供了图像处理方法及装置,其中,一种图像处理方法包括:获取到进行图像生成的描述文本和主题图像之后,将描述文本中包含的各文本关键词进行转换处理,获得各文本关键词对应的各图像关键词,确定各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将模型参数加载至预训练模型获得图像生成模型,通过图像生成模型基于各图像关键词和基于主题图像确定的主题关键词进行图像生成,获得目标图像。

【技术实现步骤摘要】

本文件涉及图像处理,尤其涉及一种图像处理方法及装置


技术介绍

1、随着互联网在不断发展和推广,生成式人工智能(aigc,ai-generated content)技术得到普及,各种各样的生成式人工智能模型得以快速应用,其中生成式人工智能模型的一个重要应用是根据用户输入的对话信息或者文本信息进行图像生成,但生成式人工智能模型训练所需要的数据量往往比较大,并且训练数据标注的成本也比较高,对生成式人工智能模型的发展产生了限制,同时如何低成本的实现生成式人工智能模型在各领域的应用成为关注的重点。


技术实现思路

1、本说明书一个或多个实施例提供了一种图像处理方法,包括:获取进行图像生成的描述文本和主题图像。对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词。在参数库中确定所述各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将所述模型参数加载至预训练模型获得图像生成模型。将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像。

2、本说明书一个或多个实施例提供了一种图像处理装置,包括:获取模块,被配置为获取进行图像生成的描述文本和主题图像。转换模块,被配置为对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词。加载模块,被配置为在参数库中确定所述各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将所述模型参数加载至预训练模型获得图像生成模型。图像生成模块,被配置为将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像。

3、本说明书一个或多个实施例提供了一种图像处理设备,包括:处理器;以及,被配置为存储计算机可执行指令的存储器,所述计算机可执行指令在被执行时使所述处理器:获取进行图像生成的描述文本和主题图像。对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词。在参数库中确定所述各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将所述模型参数加载至预训练模型获得图像生成模型。将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像。

4、本说明书一个或多个实施例提供了一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:获取进行图像生成的描述文本和主题图像。对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词。在参数库中确定所述各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将所述模型参数加载至预训练模型获得图像生成模型。将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像。

本文档来自技高网...

【技术保护点】

1.一种图像处理方法,包括:

2.根据权利要求1所述的图像处理方法,所述获取进行图像生成的描述文本和主题图像步骤执行之后,且所述将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像步骤执行之前,还包括:

3.根据权利要求2所述的图像处理方法,所述进行主题关键词提取,包括:

4.根据权利要求1所述的图像处理方法,所述对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词步骤执行之后,且所述在参数库中确定所述各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将所述模型参数加载至预训练模型获得图像生成模型步骤执行之前,还包括:

5.根据权利要求4所述的图像处理方法,所述各图像库对应的子模型的模型参数,通过如下方式获得:

6.根据权利要求1所述的图像处理方法,所述将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像步骤执行之后,还包括:

7.根据权利要求6所述的图像处理方法,所述基于所述目标图像的元素提取信息对所述目标图像进行元素提取,获得主体元素和背景元素,包括:

8.根据权利要求1所述的图像处理方法,所述对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词,包括:

9.根据权利要求4所述的图像处理方法,所述根据所述语义相似度在所述各图像库中确定所述各图像关键词匹配的各目标图像库,包括:

10.根据权利要求1所述的图像处理方法,所述对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词,包括:

11.一种图像处理装置,包括:

12.一种图像处理设备,包括:

13.一种存储介质,用于存储计算机可执行指令,所述计算机可执行指令在被处理器执行时实现以下流程:

...

【技术特征摘要】

1.一种图像处理方法,包括:

2.根据权利要求1所述的图像处理方法,所述获取进行图像生成的描述文本和主题图像步骤执行之后,且所述将所述各图像关键词和基于所述主题图像确定的主题关键词输入所述图像生成模型进行图像生成,获得目标图像步骤执行之前,还包括:

3.根据权利要求2所述的图像处理方法,所述进行主题关键词提取,包括:

4.根据权利要求1所述的图像处理方法,所述对所述描述文本中包含的各文本关键词进行转换处理,获得所述各文本关键词对应的各图像关键词步骤执行之后,且所述在参数库中确定所述各图像关键词匹配的各目标图像库对应的子模型的模型参数,并将所述模型参数加载至预训练模型获得图像生成模型步骤执行之前,还包括:

5.根据权利要求4所述的图像处理方法,所述各图像库对应的子模型的模型参数,通过如下方式获得:

6.根据权利要求1所述的图像处理方法,所述将所述各图像关键词和基于所述主题图像确定的主题...

【专利技术属性】
技术研发人员:关文政王英博
申请(专利权)人:支付宝杭州信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1