System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像处理模型训练及图像处理方法、装置、电子设备制造方法及图纸_技高网

图像处理模型训练及图像处理方法、装置、电子设备制造方法及图纸

技术编号:40968484 阅读:4 留言:0更新日期:2024-04-18 20:49
本申请提供一种图像处理模型训练及图像处理方法、装置、电子设备,包括:获取包含待移除对象的第一原始图像和不包含待移除对象的第二原始图像;根据第一原始图像中的待移除对象执行图像分割,得到包含待移除对象的原始贴图;将第二原始图像的颜色信息与原始贴图进行融合,得到融合贴图;根据融合贴图和第二原始图像得到合成图像;并根据合成图像与第二原始图像组成训练样本对,以训练图像处理模型。借此,本申请所训练的模型可提升图像处理效果,并可降低模型训练成本。

【技术实现步骤摘要】

本申请实施例涉及图像处理,特别涉及一种图像处理模型训练及图像处理方法、装置、电子设备及存储介质。


技术介绍

1、农机全景视觉感知系统是一种获取农机周围全景视觉信息的系统。所述系统通过将多个摄像头采集的数据进行拼接,生成农机周围的全景拼接图,所述全景拼接图通常采用鸟瞰图视角。

2、然而,在图像采集过程中,摄像头的取景范围经常会受到农具的遮挡,比如,收割机的割台,拖拉机的拖尾等,影响了全景图的显示效果。

3、当前直观的解决方案是将摄像头安装在比较合适的位置,通过调整摄像头的取景角度,以绕开农具遮挡部分。但这种方案需要单独定制摄像头的安装载体,在农具较大的情况下,摄像头很难找到合适的安装位置。

4、另一种方案是通过找到图像中待移除对象的位置,并对待移除对象的所在区域进行像素的填充修补,以完成对象移除任务。但此方案需要提供移除对象的位置信息,通常需要结合图像分割技术一起使用,这显然增加了算法的复杂度,并且不是端到端的解决方案。

5、此外,如何准确获取图像中被待移除对象遮挡部分的像素值,以填充对象移除后的留白区域,提高图像处理画面的逼真性,也是亟待解决的一个技术问题。

6、有鉴于此,需要一种可提高画面显示效果的图像处理技术。


技术实现思路

1、鉴于上述问题,本申请提供一种图像处理模型训练及图像处理方法、装置、电子设备,可至少部分地解决现有技术存在问题。

2、根据本申请实施例的第一方面,提供一种图像处理模型训练方法,包括:获取包含待移除对象的第一原始图像和不包含所述待移除对象的第二原始图像;根据所述第一原始图像中的所述待移除对象执行图像分割,得到包含所述待移除对象的原始贴图;将所述第二原始图像的颜色信息与所述原始贴图进行融合,得到所述原始贴图的融合贴图;根据所述融合贴图和所述第二原始图像执行图像合成,得到合成图像;将所述合成图像与所述第二原始图像组成训练样本对,以训练图像处理模型。

3、根据本申请实施例的第二方面,提供一种图像处理方法,包括:获取待处理图像;利用图像处理模型中的生成器,对所述待处理图像中的待移除对象执行移除处理,得到所述待处理图像的目标图像;其中,所述图像处理模型是利用如第一方面所述的图像处理模型训练方法所训练的。

4、根据本申请实施例的第三方面,提供一种图像处理模型训练装置,包括:获取模块,用于获取包含待移除对象的第一原始图像和不包含所述待移除对象的第二原始图像;分割模块,用于根据所述第一原始图像中的所述待移除对象执行图像分割,得到包含所述待移除对象的原始贴图;融合模块,用于将所述第二原始图像的颜色信息与所述原始贴图进行融合,得到所述原始贴图的融合贴图;合成模块,用于根据所述融合贴图和所述第二原始图像执行图像合成,得到合成图像;训练模块,用于将所述合成图像与所述第二原始图像组成训练样本对,以训练图像处理模型。

5、根据本申请实施例的第四方面,提供一种图像处理装置,包括:图像获取模块,用于获取待处理图像;图像处理模块,用于利用图像处理模型中的生成器,对所述待处理图像中的待移除对象执行移除处理,得到所述待处理图像的目标图像;其中,所述图像处理模型是利用如第三方面所述的图像处理模型训练装置所训练的。

6、根据本申请实施例的第五方面,提供一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如第一方面所述的图像处理模型训练方法对应的操作,或执行如第二方面所述的图像处理方法对应的操作。

7、根据本公开实施例的第六方面,提供一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时,可实现如第一方面所述的图像处理模型训练方法,或实现如第二方面所述的图像处理方法。

8、综上所述,本申请各实施例提供的图像处理模型训练方案,通过分割第一原始图像中的待移除对象,得到包含待移除对象的原始贴图,融合第二原始图像的颜色信息与原始贴图,得到融合贴图,并将融合贴图和第二原始图像合成,可以得到逼真度较高的合成图像。因此,利用合成图像与第二原始图像所构成的训练样本对,不仅可以提高模型训练效果,提高图像处理的逼真性,亦可批量产生模型训练样本,以降低模型训练成本。

本文档来自技高网...

【技术保护点】

1.一种图像处理模型训练方法,包括:

2.根据权利要求1所述的方法,其中,所述将所述第二原始图像的颜色信息与所述原始贴图进行融合,得到所述原始贴图的融合贴图,包括:

3.根据权利要求2所述的方法,其中,所述融合所述颜色特征与所述结构特征,得到所述融合贴图,包括:

4.根据权利要求1所述的方法,其中,所述图像处理模型为包括生成器和判别器的对抗生成网络;

5.根据权利要求4所述的方法,其中,所述生成器包括编码单元和解码单元;

6.根据权利要求4所述的方法,其中,利用预设模型参数更新公式,根据所述模型损失函数更新所述生成器;

7.根据权利要求6所述的方法,其中,所述λ为100。

8.一种图像处理方法,包括:

9.一种图像处理模型训练装置,包括:

10.一种图像处理装置,包括:

11.一种电子设备,其中,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;

12.一种计算机存储介质,其中,其上存储有计算机程序,该程序被处理器执行时,可实现如权利要求1至7中任一项所述的图像处理模型训练方法,或实现如权利要求8所述的图像处理方法。

...

【技术特征摘要】

1.一种图像处理模型训练方法,包括:

2.根据权利要求1所述的方法,其中,所述将所述第二原始图像的颜色信息与所述原始贴图进行融合,得到所述原始贴图的融合贴图,包括:

3.根据权利要求2所述的方法,其中,所述融合所述颜色特征与所述结构特征,得到所述融合贴图,包括:

4.根据权利要求1所述的方法,其中,所述图像处理模型为包括生成器和判别器的对抗生成网络;

5.根据权利要求4所述的方法,其中,所述生成器包括编码单元和解码单元;

6.根据权利要求4所述的方法,其中,利用预设模型参数更新公式,根据所述模型损...

【专利技术属性】
技术研发人员:朱浩李晓宇王锐具大源
申请(专利权)人:上海联适导航技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1