System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种新型景象匹配导航方法及系统技术方案_技高网

一种新型景象匹配导航方法及系统技术方案

技术编号:41090304 阅读:9 留言:0更新日期:2024-04-25 13:50
本发明专利技术公开了一种新型景象匹配导航方法,属于视觉导航技术领域。首先获取航空地图基准图像,经由裁剪和标签标注构建所需训练数据集;然后采用Yolov5特征检测算法,对基准图像进行特征检测,将图像中具有明确特征的语义区域提取为语义路标点,构建语义路标点库;之后依据最临近原则将每个路标点与周围路标点构建特征描述三角形描述子,根据几何特征区分相同语义路标点,增强路标点描述特殊性;最后根据实时图像生成的三角形描述子和三角形描述子库进行相似性度量,得到最终的相对位置信息、解算导航参数。本发明专利技术通过构建一种新的语义特征描述子,实现了对图像的有效描述,增强了景象匹配的精确性、场景适应性和实时性。

【技术实现步骤摘要】

本专利技术属于视觉导航,尤其涉及一种新型景象匹配导航方法及系统


技术介绍

1、景象匹配导航作为一种重要的辅助导航方式,具有全天候、低成本、高精度的优势,被广泛应用于飞行器、地面设备导航场景。然而,根据基准地图和飞行器实时拍摄图像进行匹配定位的过程需要消耗大量时间,难以实现硬件系统部署和实际应用。因此,匹配过程如何提升实时性,成为当前研究的热点。

2、现有的图像匹配技术主要分为两类:基于图像特征的匹配方法和基于统计信息的匹配方法。基于特征的匹配方法是目前应用最广泛的图像匹配算法,基本原理是将图像中的某些特征采用特殊的描述子进行描述,将图像信息转换为描述子说明,之后将目标图像的描述子和基准图像的描述子进行匹配,得到最终的相对位置信息。目前应用较为广泛的描述子主要有点特征、线特征、区域特征等,构建描述子后通过相似性度量的方式判断图像匹配关系在一些低空、低速飞行器系统已经获得较好的验证。但是面对特征较为丰富、复杂的高空航空图像依旧存在实时图像构建描述子时间过长的、难以满足系统的实时性要求的问题。基于统计信息的匹配方法,主要是聚焦于图像的灰度等特征进行聚类和统计分析,构建特征向量描述图像特征,之后在图像间进行相似性度量获得位置信息。针对航空图像导航场景,该种方法存在统计信息不仅计算量大,而且易受场景光照变化影响的问题。

3、伴随着深度学习算法在图像处理领域的广泛应用,众多图像处理任务实时性得到了极大的提升,图像匹配领域也出现了大量基于深度学习的匹配算法。例如采用神经网络进行特征点提取,大大缩减了匹配时间,但是在面对像素点过多的情况下依旧存在实时性低的问题。也有部分利用了图像的语义特征,通过目标检测的方法快速实现图像粗匹配,在粗匹配区域采用传统算法完成精匹配,但是存在无法抵抗图像的尺度变化、对相同语义目标没有区分性的问题。


技术实现思路

1、本专利技术针对现有技术的不足,提供了一种新型景象匹配导航方法,能在匹配过程中获得较高准确率、较好的场景适应性和较短的匹配时间。

2、为了实现上述功能,本专利技术采用如下技术方案:

3、一种新型景象匹配导航方法,包括以下步骤:

4、s1、获取地图基准图像并制作语义标注数据集,并获取实时图像;

5、s2、利用语义标注数据集对yolov5网络进行训练,得到能够对目标特殊语义区域进行检测的网络结构,对地图基准图像进行特殊语义区域进行检测,获得地图基准图像路标点描述;

6、s3、删除虚检点,构建路标点数据库;

7、s4、依据最临近原则将每个路标点与周围路标点构建特征三角形描述子;

8、s5、采用冗余词条优化和最优角度优选的方式构建三角形描述子库;

9、s6、根据实时图像生成的三角形描述子和三角形描述子库进行相似性度量,采用最优误差标准得到库中的匹配三角形描述子,将实时区域相对坐标信息转换为三角形描述子库词条绝对坐标信息,解算得到飞行器当前绝对位置信息。

10、作为优选,步骤s1具体为,首先将地图基准图像按照一定像素尺寸进行裁剪;然后对裁剪区域接缝处额外进行图像裁剪,保障每个语义区域能被完整的裁剪;最后选取城市场景中的操场和十字交叉路口区域作为特殊语义区域,将裁剪后图像通过labelme软件进行特殊语义区域标注获得语义标注数据集。

11、作为优选,步骤s2中,所述地图基准图像路标点描述词条表示为:

12、pointm=[labelm,scorem,xm,ym]

13、其中,m表示当前路标点的序号;pointm表示第m个路标点;labelm表示当前路标点的类别;scorem表示当前路标点的置信度得分,置信度得分表征了当前检测区域与标签数据中区域的相似性得分,得分越高表示相似度越高;xm、ym表示当前路标点在基准地图中的绝对横坐标和绝对纵坐标。

14、作为优选,步骤s3中,所述删除虚检点为:将地图基准图像路标点描述置信度得分低于设定值的路标点词条判定为虚检点进行删除;所述构建路标点数据库为:将符合要求的路标点词条存储为.npy格式文件,构建为路标点数据库。

15、作为优选,步骤s4中,具体步骤为:

16、将路标点根据坐标数值大小进行排序,顺序选择需要被描述的路标点作为基准点;选取基准点的前后点与描述点计算欧氏距离,根据距离值选择描述点;

17、将基准点作为三角形顶点,描述点作为三角形其余两顶点,构建特征三角形并构建特征三角形语义信息词条、三角形形状信息和三角形位置以构建三角形描述子。

18、作为优选,步骤s4中,所述选择描述点具体为:选取距离小于阈值距离d的点作为描述点,d取值为实时检测图像矩形区域的对角线长度。

19、作为优选,步骤s4中,所述特征三角形语义信息词条:

20、将特征三角形三个端点通过语义检测网络得到的语义信息进行统计,根据三个端点作为顶点构成的内角大小关系进行排序,表示为:

21、semanticsm=[label1m,label2m,label3m]

22、式中,下标m表示第m个特征三角形词条,label1m表示最大角顶点的语义类别,label2m表示次大角顶点的语义类别,label3m表示最小角顶点的语义类别;

23、所述三角形形状信息:

24、选取特征三角形两个内角描述三角形形状,表示为:

25、shapem=[θm1,θm2]

26、式中,θm1表示第m个特征三角形的最大内角,θm2表示第m个特征三角形的次大内角;

27、所述三角形位置:

28、选取三角形外心描述三角形位置,表示为:

29、positionm=[tri_xm,tri_ym]

30、式中,tri_xm表示第m个特征三角形的外心绝对横坐标,tri_ym表示第m个特征三角形的外心绝对纵坐标;

31、所述三角形描述子表示为:

32、trism=[label1m,label2m,label3m,θm1,θm2,tri_xm,tri_ym]。

33、作为优选,步骤s5中,所述冗余词条优化为:删除描述同个特征三角形的重复三角形描述子;所述最优角度优选为:删除三角形内角过大或过小的情况,仅保留内角角度在预设范围内的三角形描述子词条;将符合要求的三角形描述子词条存储为.npy格式文件,构建为三角形描述子数据库。

34、作为优选,步骤s6中,所述相似性度量为:

35、针对不同的类别赋不同的值,依次判断数据库中的特征三角形描述子trism中的类别label={label1,label2,label3}与实施图像生成的三角形描述子的类别是否一致,若均一致则匹配成功,否则匹配失败;

36、作为优选,所述最优误差标准为:当三角形描述子匹配成功时,依据角度误差判定内角是否相等,小于设定阈值判定为相等,否则判定为本文档来自技高网...

【技术保护点】

1.一种新型景象匹配导航方法,其特征在于,包括:

2.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤S1具体为,首先将地图基准图像按照一定像素尺寸进行裁剪;然后对裁剪区域接缝处额外进行图像裁剪,保障每个语义区域能被完整的裁剪;最后选取城市场景中的操场和十字交叉路口区域作为特殊语义区域,将裁剪后图像通过Labelme软件进行特殊语义区域标注获得语义标注数据集。

3.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤S2中,所述地图基准图像路标点描述词条表示为:

4.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤S3中,所述删除虚检点为:将地图基准图像路标点描述置信度得分低于设定值的路标点词条判定为虚检点进行删除;所述构建路标点数据库为:将符合要求的路标点词条存储为.npy格式文件,构建为路标点数据库。

5.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤S4中,具体步骤为:

6.根据权利要求5所述的新型景象匹配导航方法,其特征在于,步骤S4中,所述选择描述点具体为:选取距离小于阈值距离d的点作为描述点,d取值为实时检测图像矩形区域的对角线长度。

7.根据权利要求5所述的新型景象匹配导航方法,其特征在于,步骤S4中,所述特征三角形语义信息词条:

8.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤S5中,所述冗余词条优化为:删除描述同个特征三角形的重复三角形描述子;所述最优角度优选为:删除三角形内角过大或过小的情况,仅保留内角角度在预设范围内的三角形描述子词条;将符合要求的三角形描述子词条存储为.npy格式文件,构建为三角形描述子数据库。

9.根据权利要求1-8任意一项所述的新型景象匹配导航方法,其特征在于,所述步骤S6中,所述相似性度量为:

10.一种景象匹配导航系统,其特征在于,包括:

...

【技术特征摘要】

1.一种新型景象匹配导航方法,其特征在于,包括:

2.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤s1具体为,首先将地图基准图像按照一定像素尺寸进行裁剪;然后对裁剪区域接缝处额外进行图像裁剪,保障每个语义区域能被完整的裁剪;最后选取城市场景中的操场和十字交叉路口区域作为特殊语义区域,将裁剪后图像通过labelme软件进行特殊语义区域标注获得语义标注数据集。

3.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤s2中,所述地图基准图像路标点描述词条表示为:

4.根据权利要求1所述的新型景象匹配导航方法,其特征在于,所述步骤s3中,所述删除虚检点为:将地图基准图像路标点描述置信度得分低于设定值的路标点词条判定为虚检点进行删除;所述构建路标点数据库为:将符合要求的路标点词条存储为.npy格式文件,构建为路标点数据库。

5.根据权利要求1所述的新型景象匹配导航方法...

【专利技术属性】
技术研发人员:冷雪飞郝祥
申请(专利权)人:南京航空航天大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1