System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像编辑方法、电子设备、存储介质及程序产品技术_技高网

图像编辑方法、电子设备、存储介质及程序产品技术

技术编号:41091310 阅读:2 留言:0更新日期:2024-04-25 13:51
本公开提供了一种图像编辑方法、电子设备、存储介质及程序产品。本公开的图像编辑方法包括:获取原始图像和目标信息;根据原始图像和目标信息获取分割信息;基于分割信息对原始图像进行目标检测,获取目标掩码;以及根据目标掩码和编辑项目对原始图像进行渲染,生成目标图像。

【技术实现步骤摘要】

本公开涉及计算机,本公开尤其涉及一种图像编辑方法、电子设备、存储介质及程序产品


技术介绍

1、图像分割是图像分析的第一步,是图像理解的重要组成部分,同时也是图像处理中最困难的问题之一。图像分割是计算机视觉中的一项基本任务,涉及将图像划分为多个片段或区域,每个片段或区域对应于一个有意义的对象或图像的一部分。图像分割的目标是将图像划分为同质区域,其中每个区域共享相似的视觉特征,例如颜色、纹理或强度,同时与相邻区域不同。简单来说,图像分割旨在分离图像中的不同对象或感兴趣区域,使计算机能够在更精细的层面上理解和分析图像的内容。

2、segment anything是一种基于深度学习技术的图像语义分割方法,可以用于对图像中的任意物体进行像素级别的分割。利用深度神经网络模型能够自动从大量的标注数据中学习到图像中的物体的语义信息,进而实现精确的分割。

3、然而segment anything模型在图像分割领域表现出色,但它无法输出语义标签,并且文本提示也无法有效地支持物体分割任务。例如,在虚拟换装的应用场景中,图像分割算法只能将目标物体的区域提取出来,而并不能提取衣物的具体特征,且现有的图像分割算法还不足够精准,并不能完全覆盖目标物体。如何能在基于图像分割的算法上完成高质量的换装,这是一个难点。


技术实现思路

1、本公开提供了一种图像编辑方法、电子设备、存储介质及程序产品。

2、本公开第一方面提供了一种图像编辑方法,包括:获取原始图像和目标信息;根据所述原始图像和所述目标信息获取分割信息;基于所述分割信息对所述原始图像进行目标检测,获取目标掩码;以及根据所述目标掩码和编辑项目对所述原始图像进行渲染,生成目标图像。

3、在一些实施方式中,所述目标信息包括自然语言信息,所述分割信息包括文本特征,所述根据所述原始图像和所述目标信息获取分割信息,包括:基于所述原始图像对所述自然语言信息进行编码,获取所述文本特征。

4、在一些实施方式中,所述基于所述原始图像对所述自然语言信息进行编码,获取所述文本特征,包括:根据所述原始图像和所述自然语言信息获取目标对象及目标位置,所述目标对象为所述原始图像中的实例对象,所述目标位置是所述目标对象在所述原始图像中的位置;以及根据所述目标对象和所述目标位置进行特征提取,获取文本嵌入向量,所述文本嵌入向量为所述文本特征。

5、在一些实施方式中,所述目标信息包括点击信息,所述分割信息包括正负标签,所述根据所述原始图像和所述目标信息获取分割信息,包括:基于所述原始图像对所述点击信息进行位置识别,获取所述正负标签。

6、在一些实施方式中,所述基于所述原始图像对所述点击信息进行位置识别,获取所述正负标签,包括:根据所述点击信息获取所述原始图像中的选中区域;以及基于所述选中区域进行特征提取,获取所述正负标签。

7、在一些实施方式中,所述基于所述分割信息对所述原始图像进行目标检测,获取目标掩码,包括:根据所述原始图像进行特征提取,获取图像特征;以及根据所述分割信息对所述图像特征进行获取所述目标掩码。

8、在一些实施方式中,所述编辑项目包括目标颜色,所述根据所述目标掩码和编辑项目对所述原始图像进行渲染,生成目标图像,包括:获取所述目标颜色;以及基于所述目标颜色和所述目标掩码进行图像重建,生成所述目标图像。

9、本公开第二方面提供了一种电子设备,包括:存储器,所述存储器存储执行指令;处理器,所述处理器执行所述存储器存储的执行指令,使得所述处理器执行本公开任一实施方式所述的图像编辑方法。

10、本公开第三方面提供了一种可读存储介质,所述可读存储介质中存储有执行指令,所述执行指令被处理器执行时用于实现本公开任一实施方式所述的图像编辑方法。

11、本公开第四方面提供了一种计算机程序产品,包括计算机程序/指令,所述计算机程序/指令被处理器执行时实现本公开任一实施方式所述的图像编辑方法。

本文档来自技高网...

【技术保护点】

1.一种图像编辑方法,其特征在于,包括:

2.根据权利要求1所述的图像编辑方法,其特征在于,所述目标信息包括自然语言信息,所述分割信息包括文本特征,所述根据所述原始图像和所述目标信息获取分割信息,包括:

3.根据权利要求2所述的图像编辑方法,其特征在于,所述基于所述原始图像对所述自然语言信息进行编码,获取所述文本特征,包括:

4.根据权利要求1所述的图像编辑方法,其特征在于,所述目标信息包括点击信息,所述分割信息包括正负标签,所述根据所述原始图像和所述目标信息获取分割信息,包括:

5.根据权利要求4所述的图像编辑方法,其特征在于,所述基于所述原始图像对所述点击信息进行位置识别,获取所述正负标签,包括:

6.根据权利要求1所述的图像编辑方法,其特征在于,所述基于所述分割信息对所述原始图像进行目标检测,获取目标掩码,包括:

7.根据权利要求1所述的图像编辑方法,其特征在于,所述编辑项目包括目标颜色,所述根据所述目标掩码和编辑项目对所述原始图像进行渲染,生成目标图像,包括:

8.一种电子设备,其特征在于,包括:

9.一种可读存储介质,其特征在于,所述可读存储介质中存储有执行指令,所述执行指令被处理器执行时用于实现权利要求1至7中任一项所述的图像编辑方法。

10.一种计算机程序产品,包括计算机程序/指令,其特征在于,所述计算机程序/指令被处理器执行时实现权利要求1至7中任一项所述的图像编辑方法。

...

【技术特征摘要】

1.一种图像编辑方法,其特征在于,包括:

2.根据权利要求1所述的图像编辑方法,其特征在于,所述目标信息包括自然语言信息,所述分割信息包括文本特征,所述根据所述原始图像和所述目标信息获取分割信息,包括:

3.根据权利要求2所述的图像编辑方法,其特征在于,所述基于所述原始图像对所述自然语言信息进行编码,获取所述文本特征,包括:

4.根据权利要求1所述的图像编辑方法,其特征在于,所述目标信息包括点击信息,所述分割信息包括正负标签,所述根据所述原始图像和所述目标信息获取分割信息,包括:

5.根据权利要求4所述的图像编辑方法,其特征在于,所述基于所述原始图像对所述点击信息进行位置识别,获取所述正负标签,包括:<...

【专利技术属性】
技术研发人员:邬欣诺唐旻杰孙瑜博李梅吕达
申请(专利权)人:上海墨百意信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1