交互式分割方法、装置、设备及存储介质制造方法及图纸

技术编号:42543726 阅读:30 留言:0更新日期:2024-08-27 19:46
本申请公开了一种交互式分割方法、装置、设备及存储介质,涉及图像分割技术领域,所述的方法包括:监测用户在预设区域内的区域选取位置和区域选取粒度信息;根据位置和粒度信息通过目标交互式分割模型进行区域分割,目标交互式分割模型可以基于多种粒度的掩码粒度对对模型进行粒度可控训练获得。本申请中通过多种粒度的掩码粒度对为指导模型学习粒度控制能力提供了数据基础;使得模型能够快速掌握粒度控制能力,通过监测用户在预设区域内的区域选取位置和区域选取粒度,根据可控训练后的交互式分割模型能够根据用户点击的位置和量化分割粒度输出单一的分割掩码,从而使得用户精准控制模型的分割粒度,并且更好的解决了空间歧义问题。

【技术实现步骤摘要】

本申请涉及具体的,尤其涉及一种交互式分割方法、装置、设备及存储介质


技术介绍

1、交互式分割旨在根据用户输入的提示来分割特定的物体或区域,其中,用户输入的类型多种多样,包括涂鸦、点击、框、文本等。基于点击的交互式分割方法由于其简洁易用性和完善的训练评测标准受到了学术界和工业界的广泛研究。现有的单粒度输出管线由于未考虑空间歧义问题,因此需要更多次的用户交互来得到更为准确的分割掩码,不利于用户交互。多粒度输出管线尽管在一定程度上缓和了点击带来的空间歧义问题,但是缺点也比较明显:模型的输出冗余不可避免,大部分输出可能会被用户舍弃,并且输出粒度不可由用户控制,导致输出结果与用户预期相差较大。

2、因此,如何在解决空间歧义问题的前提下,减少冗余输出,更精确的输出用户期待粒度的分割结果是目前亟需解决的一个问题。


技术实现思路

1、本申请的主要目的在于提供一种交互式分割方法、装置、设备及存储介质,旨在解决现有的交互式分割的多粒度输出管线存在输出冗余,输入粒度不可控导致的输出结果不够精准的技术问题。

...

【技术保护点】

1.一种交互式分割方法,其特征在于,所述的方法包括:

2.如权利要求1所述的方法,其特征在于,所述监测用户在预设区域内的区域选取信息的步骤之前,还包括:

3.如权利要求2所述的方法,其特征在于,所述根据掩码引擎通过多粒度环路模拟方法迭代生成多粒度掩码的步骤,包括:

4.如权利要求3所述的方法,其特征在于,所述在达到迭代终止条件时,获得多粒度掩码的步骤,包括:

5.如权利要求2所述的方法,其特征在于,所述根据粒度评估器从尺度粒度和语义粒度两个维度评估每个所述多粒度掩码的粒度值的步骤,包括:

6.如权利要求5所述的方法,其特征在于,...

【技术特征摘要】

1.一种交互式分割方法,其特征在于,所述的方法包括:

2.如权利要求1所述的方法,其特征在于,所述监测用户在预设区域内的区域选取信息的步骤之前,还包括:

3.如权利要求2所述的方法,其特征在于,所述根据掩码引擎通过多粒度环路模拟方法迭代生成多粒度掩码的步骤,包括:

4.如权利要求3所述的方法,其特征在于,所述在达到迭代终止条件时,获得多粒度掩码的步骤,包括:

5.如权利要求2所述的方法,其特征在于,所述根据粒度评估器从尺度粒度和语义粒度两个维度评估每个所述多粒度掩码的粒度值的步骤,包括:

6.如权利要求5所述的方法,其特征在于,所述根据每个所述多粒度掩码所覆盖的图像内容分布确定语义粒度的步骤...

【专利技术属性】
技术研发人员:陈杰赵祎安李剑霞
申请(专利权)人:北京大学深圳研究生院
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1