语义分割中的图像异常检测方法、装置及存储介质制造方法及图纸

技术编号:40312412 阅读:17 留言:0更新日期:2024-02-07 20:54
本申请涉及计算机视觉领域,尤其涉及一种语义分割中的图像异常检测方法、装置及存储介质。所述方法包括:将目标图像输入至语义分割模型中输出得到第一中间层特征,并将目标图像输入至辅助共识模型中输出得到第二中间层特征;根据第一中间层特征和第二中间层特征确定第一异常参数,第一异常参数指示第一中间层特征和第二中间层特征之间的差异程度;根据第一异常参数确定异常检测结果。本申请实施例通过提供一种共识机制,在训练样本集上训练一个模拟语义分割模型的辅助共识模型,使得辅助共识模型可以在分布内的难样本上与语义分割模型达成共识,极大地排除了难样本的影响,大大降低了假阳性,保证了语义分割中的图像异常检测的准确性。

【技术实现步骤摘要】

本申请涉及计算机视觉领域,尤其涉及一种语义分割中的图像异常检测方法、装置及存储介质


技术介绍

1、图像语义分割是计算机视觉领域中一项重要的研究内容,其目标是将图像分割成具有不同语义信息的区域,并且标注每个区域相应的语义类别,如图1所示。例如通过对一幅图像进行图像语义分割后可为图像中的物体添加语义类别(如桌子、墙壁、天空、人、狗等),可应用于多种应用场景,例如:自动驾驶、辅助驾驶、智能机器人等相关领域中。

2、目前的语义分割模型无法预测训练过程中不存在该语义类别的样本,称这一类样本为异常样本;对于部分的分布内样本(in distribution,id)上,目前的语义分割模型往往也会给出错误的预测,称这一类样本为难样本。相关技术中,电子设备会对异常样本给出完全错误的语义类别判定,在对安全性要求极高的自动驾驶场景中会导致相当严重的后果。如图2所示,对于训练集中不包含的语义类别即框中的物体12,电子设备通过目前的语义分割模型直接将物体12的语义类别判定为道路,这会导致严重的驾驶事故。因此,对于给定的语义分割模型,如何通过算法检测并分割出其无法正确分割本文档来自技高网...

【技术保护点】

1.一种语义分割中的图像异常检测方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述第一中间层特征为所述语义分割模型在多个网络层次提取视觉特征时中间层的特征矩阵,所述第二中间层特征为所述辅助共识模型在多个网络层次提取视觉特征时中间层的特征矩阵;

3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述训练样本集,对所述候选辅助模型进行训练得到所述辅助共识模型,包括:

5.根据权利要求1至4任一所述的方法,其特征在于,所述方法还包括:

6.根...

【技术特征摘要】

1.一种语义分割中的图像异常检测方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述第一中间层特征为所述语义分割模型在多个网络层次提取视觉特征时中间层的特征矩阵,所述第二中间层特征为所述辅助共识模型在多个网络层次提取视觉特征时中间层的特征矩阵;

3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述训练样本集,对所述候选辅助模型进行训练得到所述辅助共识模型,包括:

5.根据权利要求1至4任一所述的方法,其特征在于,所述方法还包括:

6.根据权利要求5所述的方法,其特征在于,所述根据所述第一中间层特征和多个所述记忆存...

【专利技术属性】
技术研发人员:蒋东生岑家仲谢凌曦沈为田奇
申请(专利权)人:华为云计算技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1