基于轻量化网络的遥感影像多尺度目标检测识别方法技术

技术编号:32635536 阅读:13 留言:0更新日期:2022-03-12 18:10
本发明专利技术公开了一种基于轻量化网络的遥感影像多尺度目标检测识别方法,包括以下步骤:对获取的遥感图像进行预处理;基于深度可分离卷积替换特征提取主干和检测分枝中的标准卷积过程,并将处理后的图像输入卷积神经网络进行特征提取;采用特征金字塔,从卷积神经网络不同层抽取不同尺度特征图像进行预测,融合不同层检测结果,得到多尺度融合特征图;在特征图上设置候选框,生成预测张量,基于此预测目标所属类别的置信度及位置信息。通过引入深度可分离卷积,减少模型参数,提升网络检测速度;提取多个尺度特征图,满足不同尺度目标检测需求;将语义信息特征强的高层特征图与几何信息特征强的底层特征图融合,提升小目标检测性能。能。能。

【技术实现步骤摘要】
基于轻量化网络的遥感影像多尺度目标检测识别方法


[0001]本专利技术涉及遥感图像检测
,更具体的说是涉及基于轻量化网络的遥感影像多尺度目标检测识别方法。

技术介绍

[0002]目前,随着遥感技术不断发展,遥感影像的分辨率,包括时间分辨率、空间分辨率、辐射分辨率和光谱分辨率正在不断提高,高质量的遥感影像逐渐被广泛应用于军事和民用领域,基于深度学习的遥感影像目标检测也逐渐成为研究热点。为了实现遥感影像中的目标检测,研究学者们相继提出了许多有价值的目标检测方法,目前主流检测算法通常可以分为2类:分阶段检测方法和端到端检测方法。
[0003]第一类是分阶段检测方法,该方法一般先通过滑动窗等方法获得候选区域,之后提取特征训练分类器,再通过分类器判断候选框中是否包含目标。目前遥感领域许多目标检测算法都是基于这种方法实现的,这类方法优势在拥有较高的检测精度高。
[0004]第二类是基于回归方法的端到端目标检测算法,将候选框提取阶段和类别预测阶段有效结合,YOLO与SSD都是通过回归的方式完成目标检测,使利用深度学习的方式进行目标检测速度大大提升。
[0005]但是,现有遥感影像目标检测方法的不足主要包括:分阶段检测方法的检测流程均包含多个阶段,实现过程复杂,通过滑窗提取了大量冗余候选区域,导致检测速度慢,难以满足遥感影像处理实时需求。基于回归方法的端到端目标检测算法主要是针对自然场景设计,而遥感影像范围广,目标尺度差异大,小目标占比大,分辨率低。因此,该方法不能直接适用于遥感图像,存在多尺度目标提取能力差、小目标漏检等问题
[0006]因此,引入深度可分离卷积,减少模型参数,提升网络检测速度;提取多个尺度特征图,满足不同尺度目标检测需求;将语义信息特征强的高层特征图与几何信息特征强的底层特征图融合,提升小目标检测性能是本领域技术人员亟需解决的问题。

技术实现思路

[0007]有鉴于此,本专利技术提供了一种基于轻量化网络的遥感影像多尺度目标检测识别方法,通过引入深度可分离卷积,减少模型参数,提升网络检测速度;提取多个尺度特征图,满足不同尺度目标检测需求;将语义信息特征强的高层特征图与几何信息特征强的底层特征图融合,提升小目标检测性能。
[0008]为了实现上述目的,本专利技术采用如下技术方案:
[0009]一种基于轻量化网络的遥感影像多尺度目标检测识别方法,包括以下步骤:
[0010]S1、对获取的遥感图像进行预处理;
[0011]S2、基于深度可分离卷积替换特征提取主干和检测分枝中的标准卷积过程,并将处理后的图像输入卷积神经网络进行特征提取;
[0012]S3、采用特征金字塔,从卷积神经网络不同层抽取不同尺度特征图像进行预测,融
合不同层检测结果,得到多尺度融合特征图;
[0013]S4、在特征图上设置候选框,生成预测张量,基于此预测目标所属类别的置信度及位置信息。
[0014]优选的,所述步骤S2具体包括:
[0015]S21、通过32个3x3的卷积核卷积,在初始层的基础上增加网络层数,提高特征表达能力;
[0016]S22、然后由block1和block2交替堆积,每个block由深度卷积和点卷积组成,每个卷积后都进行了批归一化,接着输出到relu层,其中block1的深度卷积卷积步长为1,block2的深度卷积卷积步长为2;
[0017]S23、经过13个卷积块实现特征提取后,将conv13特征图反卷积后与conv5融合,将融合后的特征图与conv11、conv13特征图同时送入目标检测模块,进行坐标回归和分类,并对多个尺度特征图上的检测结果进行非极大值抑制,筛选出最终结果,完成特征提取。
[0018]优选的,所述步骤S3具体包括:
[0019]S31、计算特征图感受野:
[0020][0021]选取合适的特征图
[0022]f(x)=k,其中R
k
‑1<x≤R
k
[0023]其中R
k
表示第k层感受野大小,初始感受野R0=1,K
k
表示第k层卷积核大小,s
k
表示第k层卷积步长,m为特征图总层数,x为样本长度,f(x)表示该样本长度对应的特征图;
[0024]S32、将样本划分为大、中、小3个阶段,分别选取最后3种不同大小的特征图;
[0025]S33、采用步长为2的2
×
2卷积核,通过对38
×
38的高语义信息特征图进行上采样,将反卷积输出经过批归一化处理和ReLU层后,与10
×
10的低语义信息特征图分辨率相同,将两种特征图拼接成多通道特征图,利用多通道卷积对经拼接而成的多通道特征图提取特征,使用3
×3×
256的卷积核实现特征融合。
[0026]优选的,所述步骤S4具体包括:
[0027]S41、选取有效感受野与理论感受野比例为1/3,并计算候选框大小
[0028]k∈[1,m][0029]其中,R
k
表示第k层感受野大小,m为特征图总层数;
[0030]确定候选框长宽比,计算出每张特征图候选框对应原图的长宽占比,当长宽比为1时,增加2个长度分别为S
k
和的候选框,因此每张特征图有6个候选框,
[0031][0032]其中r为长宽比系数,w
k
,h
k
分别为第k层特征图候选框长宽;
[0033]S42、建立真实标签和候选框的对应关系,真实标签从候选框中选择,匹配原则为:图中真实目标与候选框交并比IoU最大的候选框进行匹配,确保候选框覆盖每一个真实目
标,与真实目标覆盖的候选框为正样本,没有匹配目标的候选框为负样本;当候选框匹配多个真实目标,取IoU最大的目标;
[0034]S43、采用SSD的损失函数训练模型,损失函数由置信度误差与位置误差的加权构成
[0035][0036]其中x表示候选框与这是目标是否匹配,匹配为1,不匹配为0;c为多类目标置信度预测值;为对应于候选框的边界框位置预测值;g是真实目标的位置参数;N是与真实目标匹配的候选框数量;是对位置误差与置信度误差之间的比例进行调整的参数,通常取1;
[0037]对于位置误差,其采用真实目标和候选框之间的Smooth
L1
损失,定义如下:
[0038][0039][0040][0041][0042]其中表示第i个候选框与类别k的第j个真实目标进行匹配;表示平滑L1范数,i∈Pos表示第i个正样本预测框;x,y,w,h分别表示候选框中心坐标以及其宽度和高度;是对g进行编码得到的;l表示对应于候选框的预测框的偏移量;g表示真实框;d表示候选框;
[0043]置信度误差是多类别置信度c的softmax损失,
[0044][0045][0046]中i∈Neg表示第i个正样本预本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于轻量化网络的遥感影像多尺度目标检测识别方法,其特征在于,包括以下步骤:S1、对获取的遥感图像进行预处理;S2、基于深度可分离卷积替换特征提取主干和检测分枝中的标准卷积过程,并将处理后的图像输入卷积神经网络进行特征提取;S3、采用特征金字塔,从卷积神经网络不同层抽取不同尺度特征图像进行预测,融合不同层检测结果,得到多尺度融合特征图;S4、在特征图上设置候选框,生成预测张量,基于此预测目标所属类别的置信度及位置信息。2.根据权利要求1所述的一种基于轻量化网络的遥感影像多尺度目标检测识别方法,其特征在于,所述步骤S2具体包括:S21、通过32个3x3的卷积核卷积,在初始层的基础上增加网络层数,提高特征表达能力;S22、然后由block1和block2交替堆积,每个block由深度卷积和点卷积组成,每个卷积后都进行了批归一化,接着输出到relu层,其中block1的深度卷积卷积步长为1,block2的深度卷积卷积步长为2;S23、经过13个卷积块实现特征提取后,将conv13特征图反卷积后与conv5融合,将融合后的特征图与conv11、conv13特征图同时送入目标检测模块,进行坐标回归和分类,并对多个尺度特征图上的检测结果进行非极大值抑制,筛选出最终结果,完成特征提取。3.根据权利要求1所述的一种基于轻量化网络的遥感影像多尺度目标检测识别方法,其特征在于,所述步骤S3具体包括:S31、计算特征图感受野:选取合适的特征图f(x)=k,其中R
k
‑1<x≤R
k
其中R
k
表示第k层感受野大小,初始感受野R0=1,K
k
表示第k层卷积核大小,s
k
表示第k层卷积步长,m为特征图总层数,x为样本长度,f(x)表示该样本长度对应的特征图;S32、将样本划分为大、中、小3个阶段,分别选取最后3种不同大小的特征图;S33、采用步长为2的2
×
2卷积核,通过对38
×
38的高语义信息特征图进行上采样,将反卷积输出经过批归一化处理和ReLU层后,与10
×
10的低语义信息特征图分辨率相同,将两种特征图拼接成多通道特征图,利用多通道卷积对经拼接而成的多通道特征图提取特征,...

【专利技术属性】
技术研发人员:蒋丽婷张志超喻金桃
申请(专利权)人:中国电子科技集团公司第十五研究所
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1