一种图像处理方法、设备和计算机可读存储介质技术

技术编号:31158078 阅读:29 留言:0更新日期:2021-12-04 09:56
本发明专利技术实施例公开了一种图像处理方法,所述方法包括:获取第一待训练图像,并基于所述第一待训练图像进行训练生成文字区域生成器;其中,所述第一待训练图像为具有文字信息的图像;采用所述文字区域生成器对所述第一待训练图像进行处理,生成待处理标签图像;其中,所述待处理标签图像用于指示所述第一待训练图像中文字所覆盖的区域;基于所述待处理标签图像和所述第一待训练图像生成文字缺失图像,并基于所述文字缺失图像进行训练,生成图像修复生成器;获取具有文字信息的待处理图像;采用所述文字区域生成器和所述图像修复生成器对所述待处理图像进行修复,得到目标图像。本发明专利技术的实施例还公开了一种图像处理设备和计算机可读存储介质。可读存储介质。可读存储介质。

【技术实现步骤摘要】
一种图像处理方法、设备和计算机可读存储介质


[0001]本专利技术涉及通信领域中的图像处理技术,尤其涉及一种图像处理方法、设备和计算机可读存储介质。

技术介绍

[0002]随着全球化与互联网的快速发展,很多电商都选择让自己的商品走向国际,以方便快捷地到达各个国家的消费者手中。这就需要在各个国家推出自己的商品主站,自然主站里的商品详情图、评论、商品介绍等都需要由中文变成对应国家的文字;其中,最重要的是需要将商品详情图像变成对应语言的图像。这需要将原始图像中的文字擦除并将其擦除区域修复,再将对应语言文字写入原始文字位置。
[0003]目前,一般是采用图像修复(Image Inpainting)技术来解决上述问题的;且,相关技术中大多是使用快速行进(Fast-Marching)算法、块匹配(PatchMatch)算法或深度学习算法应用于图像修复技术中来实现商品详情图像中文字的擦除以及擦除区域修复的。但是,相关技术中这种图像修复方案存在文字区域的纹理修复不够清晰和不完整的问题,导致图像修复效果较差。

技术实现思路
r/>[0004]为本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法,其特征在于,所述方法包括:获取第一待训练图像,并基于所述第一待训练图像进行训练生成文字区域生成器;其中,所述第一待训练图像为具有文字信息的图像;采用所述文字区域生成器对所述第一待训练图像进行处理,生成待处理标签图像;其中,所述待处理标签图像用于指示所述第一待训练图像中文字所覆盖的区域;基于所述待处理标签图像和所述第一待训练图像生成文字缺失图像,并基于所述文字缺失图像进行训练,生成图像修复生成器;获取具有文字信息的待处理图像;采用所述文字区域生成器和所述图像修复生成器对所述待处理图像进行修复,得到目标图像。2.根据权利要求1所述的方法,其特征在于,所述获取第一待训练图像,包括:获取第二待训练图像;其中,所述第二待训练图像中不具有文字信息;在所述第二待训练图像中添加文字信息,得到所述第一待训练图像。3.根据权利要求1或2所述的方法,其特征在于,所述基于所述第一待训练图像进行训练生成文字区域生成器,包括:基于所述第一待训练图像,生成待训练标签图像;其中,所述待训练标签图像用于指示所述第一待训练图像中的文字所覆盖的区域;基于所述第一待训练图像和所述待训练标签图像进行训练,生成所述文字区域生成器。4.根据权利要求3所述的方法,其特征在于,所述基于所述第一待训练图像,生成待训练标签图像,包括:设置所述第一待训练图像中文字所在区域的色彩为第一色彩,以及所述第一待训练图像中除文字外其它区域的色彩为第二色彩,得到所述待训练标签图像。5.根据权利要求3所述的方法,其特征在于,所述基于所述第一待训练图像和所述待训练标签图像进行训练,生成所述文字区域生成器,包括:基于所述第一待训练图像、所述待训练标签图像和第一损失函数对初始文字生成器进行训练,生成所述文字区域生成器;其中,所述第一损失函数为所述初始文字生成器对应的损失函数。6.根据权利要求5所述的方法,其特征在于,所述基于所述第一待训练图像、所述待训练标签图像和第一损失函数对初始文字生成器进行训练,生成所述文字区域生成器,包括:基于所述第一待训练图像、所述待训练标签图像和第二损失函数对第一初始鉴别器进行训练,生成第一鉴别器;其中,所述第二损失函数为与所述初始鉴别器对应的损失函数;基于所述第一待训练图像、所述待训练标签图像、所述第一损失函数和所述第一鉴别器,对所述初始文字生成器进行训练,生成所述文字区域生成器。7.根据权利要求6所述的方法,其特征在于,所述基于所述第一待训练图像、所述待训练标签图像和第二损失函数对第一初始鉴别器进行训练,生成第一鉴别器,包括:采用所述初始文字生成器对所述第一待训练图像进行处理,生成参考标签图像;基于所述参考标签图像、所述待训练标签图像和所述第二损失函数对第一初始鉴别器进行训练,生成所述第一鉴别器。
8.根据权利要求6所述的方法,其特征在于,所述文字区域生成器的架构包括UNet架构;所述第一鉴别器包括马尔科夫性的鉴别器。9.根据权利要求1所述的方法,其特征在于,所述基于所述待处理标签图像和所述第一待训练图像生成文字缺失图像,包括:确定所述待处理标签图像对应的第一像素矩阵和所...

【专利技术属性】
技术研发人员:邸志惠郑志彤桂创华
申请(专利权)人:北京京东世纪贸易有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1