System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 应用界面的图像分割方法、装置、电子设备及存储介质制造方法及图纸_技高网

应用界面的图像分割方法、装置、电子设备及存储介质制造方法及图纸

技术编号:40330656 阅读:12 留言:0更新日期:2024-02-09 14:22
本申请公开了一种应用界面的图像分割方法、装置、电子设备及存储介质,涉及图像处理技术领域。该方法包括:电子设备获取目标应用的运行界面截图,目标应用为与目标任务关联的应用;利用预先训练的图像分割模型,提取运行界面截图中所包含的至少部分实体对象,得到图像分割结果,以根据所述图像分割结果执行所述目标任务所对应的操作,图像分割模型是预先利用多个应用的运行界面截图样本进行图像分割训练得到的。如此,利用专门针对应用的运行界面训练的图像分割模型,对目标应用的运行界面截图进行图像分割,从而能够得到更加准确的图像分割结果,进而使得基于准确的图像分割结果执行的目标任务对应的操作的执行效果更好更为准确。

【技术实现步骤摘要】

本申请涉及图像处理,尤其涉及一种应用界面的图像分割方法、装置、电子设备及存储介质


技术介绍

1、图像分割就是把图像分成若干个特定的、具有独特性质的区域并提出感兴趣目标的技术和过程。它是由图像处理到图像分析的关键步骤。现有的图像分割方法主要分以下几类:基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。

2、但是,在相关技术中,对应用的运行界面的图像分割的准确性和效果仍然较差,从而影响到后续利用图像分割结果进行下游应用的效果。


技术实现思路

1、本申请提出了一种应用界面的图像分割方法、装置、电子设备及存储介质,以提高对应用的运行界面进行图像分割的准确性。

2、第一方面,本申请实施例提供了一种应用界面的图像分割方法,应用于电子设备,所述方法包括:获取目标应用的运行界面截图,所述目标应用为与目标任务关联的应用;利用预先训练的图像分割模型,提取所述运行界面截图中所包含的至少部分实体对象,得到图像分割结果,以根据所述图像分割结果执行所述目标任务所对应的操作,所述图像分割模型是预先利用多个应用的运行界面截图样本进行图像分割训练得到的。

3、第二方面,本申请实施例提供了一种应用界面的图像分割装置,应用于电子设备,所述装置包括:截图获取模块,用于获取目标应用的运行界面截图,所述目标应用为与目标任务关联的应用;图像分割模块,用于利用预先训练的图像分割模型,提取所述运行界面截图中所包含的至少部分实体对象,得到图像分割结果,以根据所述图像分割结果执行所述目标任务所对应的操作,所述图像分割模型是预先利用多个应用的运行界面截图样本进行图像分割训练得到的。

4、第三方面,本申请实施例提供了一种电子设备,包括:一个或多个处理器;存储器;一个或多个程序,其中所述一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述的方法。

5、第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有程序代码,所述程序代码可被处理器调用执行上述的方法。

6、本申请提供的方案中,电子设备获取目标应用的运行界面截图,目标应用为与目标任务关联的应用;利用预先训练的图像分割模型,提取运行界面截图中所包含的至少部分实体对象,得到图像分割结果,以根据所述图像分割结果执行所述目标任务所对应的操作,图像分割模型是预先利用多个应用的运行界面截图样本进行图像分割训练得到的。如此,利用专门针对应用的运行界面训练的图像分割模型,对目标应用的运行界面截图进行图像分割,从而能够更加准确地分割出截图中的至少部分实体对象,得到更加准确的图像分割结果;并且,可以使得基于图像分割结果执行的目标任务对应的操作的执行效果更好更为准确。

本文档来自技高网...

【技术保护点】

1.一种应用界面的图像分割方法,其特征在于,应用于电子设备,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述目标任务与多种预设应用相关联,所述获取目标应用的运行界面截图,包括:

3.根据权利要求2所述的方法,其特征在于,所述目标任务为用户行为分析任务;

4.根据权利要求2所述的方法,其特征在于,所述目标任务为即时信息推送任务;

5.根据权利要求1所述的方法,其特征在于,所述目标应用为前台运行的应用,所述获取目标应用的运行界面截图,包括:

6.根据权利要求1-5任一项所述的方法,其特征在于,所述图像分割模型包括图像特征提取模块以及掩码预测模块,所述利用预先训练的图像分割模型,提取所述运行界面截图中所包含的至少部分实体对象,得到图像分割结果,包括:

7.根据权利要求6所述的方法,其特征在于,所述图像特征提取模块是对目标图像编码器进行压缩处理后得到的,所述掩码预测模块时对目标掩码预测器进行压缩处理后得到的;

8.根据权利要求6所述的方法,其特征在于,所述目标任务包含有目标提示文本信息,在所述将所述目标图像特征输入至所述掩码预测模块进行掩码预测,得到目标位置掩码之前,所述方法还包括:

9.根据权利要求8所述的方法,其特征在于,所述图像分割模型还包括文本特征提取模块,所述方法还包括:

10.根据权利要求8所述的方法,其特征在于,在所述从多个预设提示文本特征中,获取与所述目标提示文本信息匹配的预设提示文本特征,作为目标文本提示特征之前,所述方法还包括:

11.一种应用界面的图像分割装置,其特征在于,应用于电子设备,所述装置包括:

12.一种电子设备,其特征在于,包括:

13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1至10任一项所述的方法。

...

【技术特征摘要】

1.一种应用界面的图像分割方法,其特征在于,应用于电子设备,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述目标任务与多种预设应用相关联,所述获取目标应用的运行界面截图,包括:

3.根据权利要求2所述的方法,其特征在于,所述目标任务为用户行为分析任务;

4.根据权利要求2所述的方法,其特征在于,所述目标任务为即时信息推送任务;

5.根据权利要求1所述的方法,其特征在于,所述目标应用为前台运行的应用,所述获取目标应用的运行界面截图,包括:

6.根据权利要求1-5任一项所述的方法,其特征在于,所述图像分割模型包括图像特征提取模块以及掩码预测模块,所述利用预先训练的图像分割模型,提取所述运行界面截图中所包含的至少部分实体对象,得到图像分割结果,包括:

7.根据权利要求6所述的方法,其特征在于,所述图像特征提取模块是对目标图像编码器进行压缩处理后得到的,所...

【专利技术属性】
技术研发人员:李士新邱雨帅朝春
申请(专利权)人:OPPO广东移动通信有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1