图像处理模型的生成方法、装置、设备及存储介质制造方法及图纸

技术编号:41318501 阅读:16 留言:0更新日期:2024-05-13 14:58
本申请提供了一种图像处理模型的生成方法、装置、设备及存储介质,方法包括:获取训练样本,训练样本包括样本图像、标签图像以及样本文本,样本文本用于描述样本图像中至少一个特征,样本图像为缺失至少一个特征的图像;基于待训练图像处理模型对样本图像进行特征提取,得到第一样本特征向量,以及基于待训练图像处理模型对样本文本进行特征提取,得到第二样本特征向量;基于待训练图像处理模型对第一样本特征向量以及第二样本特征向量进行特征融合,得到输出图像;对输出图像以及标签图像进行计算,得到损失函数值;基于损失函数值对待训练图像处理模型的模型参数进行更新。本申请的技术方案,能够提高图像恢复的准确率和效率。

【技术实现步骤摘要】

本申请涉及图像处理,特别涉及一种图像处理模型的生成方法、装置、设备及存储介质


技术介绍

1、在图像处理领域,为了实现对图像进行恢复,需要处理图像的各种退化,例如噪声、模糊、雾霾和雨水的影响,从而实现图像的恢复。

2、相关技术中,使用visual prompt(视觉提示)的方式来对不同的退化进行手动调试处理,这些visual prompt与退化之间的对应关系的准确与否直接影响着最终的处理效果。

3、但是,由于退化类型往往是未知且非常复杂的,调试人员很难精确地找到对应的visualprompt,从而降低了图像恢复的准确率以及效率。


技术实现思路

1、本申请实施例提供了一种图像处理模型的生成方法,能够提高图像恢复的准确率以及效率。该技术方案如下:

2、根据本申请实施例的第一方面,提供了一种图像处理模型的生成方法,该方法包括:

3、获取训练样本,该训练样本包括样本图像、标签图像以及样本文本,该样本文本用于描述该样本图像中至少一个特征,该样本图像为缺失该至少一个特征的图本文档来自技高网...

【技术保护点】

1.一种图像处理模型的生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述待训练图像处理模型对所述样本文本进行特征提取,得到第二样本特征向量,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述待训练图像处理模型对所述至少一个分词向量进行编码,得到所述第二样本特征向量,包括:

4.根据权利要求1所述的方法,其特征在于,所述基于所述待训练图像处理模型对所述第一样本特征向量以及所述第二样本特征向量进行特征融合,得到输出图像,包括:

5.根据权利要求4所述的方法,其特征在于,所述对所述中间特征向量进行处理...

【技术特征摘要】

1.一种图像处理模型的生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述待训练图像处理模型对所述样本文本进行特征提取,得到第二样本特征向量,包括:

3.根据权利要求2所述的方法,其特征在于,所述基于所述待训练图像处理模型对所述至少一个分词向量进行编码,得到所述第二样本特征向量,包括:

4.根据权利要求1所述的方法,其特征在于,所述基于所述待训练图像处理模型对所述第一样本特征向量以及所述第二样本特征向量进行特征融合,得到输出图像,包括:

5.根据权利要求4所述的方法,其特征在于,所述对所述中间特征向量进行处理,得到所述输出图像,包括:

6.根据权利要求5所述的方法,其特征在于...

【专利技术属性】
技术研发人员:刘建伟
申请(专利权)人:爱芯元智半导体宁波有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1