一种更快速识别高速行人非法上路的道路语义分割方法技术

技术编号:40912657 阅读:18 留言:0更新日期:2024-04-18 14:40
本发明专利技术公开了一种更快速识别高速行人非法上路的道路语义分割方法,属于应急管理技术领域,其包括:基于传统照相机或道路监控摄像头,获取高速路段道路全景RGB图像;提取图像特征向量F;通过构建Transformer结构像素级语义分割模型,得到与高速路段道路全景RGB图像同尺寸的N个掩码(mask)像素向量和每个像素点类别预测值;基于所有分类为行人的掩码,自动拟合所有行人目标检测框,统计所述行人目标检测框内所有像素点类别,若存在道路类别像素,则判断该行人非法上路。本发明专利技术可以获得精度更高的道路语义分割精度,而且可以极大减少计算开销,更适应于道路超高清监控的高分辨率级的语义分割。

【技术实现步骤摘要】

本专利技术属于图像计算,具体的说是一种更快速识别高速行人非法上路的道路语义分割方法


技术介绍

1、高速道路行人上路是高速常见的安全事故之一,为了更精准地识别高速行人非法上路行为,需要准确识别出监控画面中的道路场景精确区域,这需要对道路监控画面做出精准的道路语义分割结果;传统的道路语义分割方法,往往基于图像中每个像素的特征编码去预测每个像素点属于哪个类别,这种方法在超清摄像头、高分辨率的道路监控场景下,针对每个像素点预测分类结果,往往计算开销巨大,对道路监控镜头的实时计算能力有过高的要求。此外,传统的实例分割方法区别于语义分割,仅获取特定类别目标下的分割结果,虽能获取更快速的计算速度,但是往往只能识别类别单一的目标,无法对复杂的道路全场景像素级区域做精准分类。

2、如授权公布号为cn109740451b的专利公开了基于重要性加权的道路场景图像语义分割方法,首先建立基于重要性加权的损失函数的segnet神经网络架构;然后选择cityscapes数据集,划分成训练数据集、验证数据集、测试数据集,训练神经网络模型,进行道路场景图像语义分割。使用损失函本文档来自技高网...

【技术保护点】

1.一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,包括以下具体步骤:

2.如权利要求1所述的一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,所述Transformer结构像素级语义分割模型由Transformer网络模型和像素级编码模型组成,并通过mask分类损失函数和像素级mask区域损失函数训练该道路Transformer结构像素级语义分割模型。

3.如权利要求2所述的一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,所述Transformer网络模型通过将通过N个可学习的位置编码和所述图像特征向量F计算得到的N个查询...

【技术特征摘要】

1.一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,包括以下具体步骤:

2.如权利要求1所述的一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,所述transformer结构像素级语义分割模型由transformer网络模型和像素级编码模型组成,并通过mask分类损失函数和像素级mask区域损失函数训练该道路transformer结构像素级语义分割模型。

3.如权利要求2所述的一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,所述transformer网络模型通过将通过n个可学习的位置编码和所述图像特征向量f计算得到的n个查询向量作为输入,再经过多层感知机(mpl)映射为n个目标的掩码预测区域和预测类别与掩码位置向量,其中所述目标的掩码预测区域和预测类别映射的向量尺寸为n×(k+1),n表示n次查询,k为图像中总的类别数,加上空类别,结果为k+1,所述掩码位置向量尺寸为cε×n,cε表示输出向量长度。

4.如权利要求3所述的一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,所述n个查询向量的具体获取步骤包括:首先将图片预测为一组数量为n的二值掩码,每个掩码的尺寸与所述高速路段道路全景rgb图像尺寸相同,值为0或1,代表该掩码预测到的目标实例,针对每个预测的掩码目标,去预测掩码所代表的类别,其中n是预先设置好的超参数,假设图像中存在类别个数为k,k和之间的关系满足n>>k,若预测的掩码存在现实意义,则该掩码下所有像素均预测为该掩码代表的类别值,若该掩码不存在现实意义,则该掩码被预测为空类别,最终n个掩码,每个掩码均会被预测为k+1种类别中的一种。

5.如权利要求3所述的一种更快速识别高速行人非法上路的道路语义分割方法,其特征在于,所述像素级编码模型中配有像素解码器,将所述图像特征向量f输入所述像素解码器,得到像素...

【专利技术属性】
技术研发人员:梁丞瑜李文成李永陈岩卢隆王军鹏樊庆宇简铮
申请(专利权)人:天翼云科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1