基于RGB相似度特征匹配的图像拼接方法、装置及设备制造方法及图纸

技术编号:39301110 阅读:28 留言:0更新日期:2023-11-12 15:52
本发明专利技术公开一种基于RGB相似度特征匹配的图像拼接方法、装置及设备,拼接方法包括:提取待拼接图像的特征信息,对特征信息进行正则化处理后计算两个待拼接图像之间的特征全局相似性,并计算预测偏移量,基于预测偏移量,估计出至少两个待拼接图像之间变化的单应性矩阵;基于待拼接图像、单应性矩阵和单位矩阵,使得待拼接图像变形得到变换图像,根据至少两个变换图像的特征区域的像素点RGB相似度,进行特征信息的匹配并确定最优匹配,生成初步拼接图像;将初步拼接图像、至少两个变换图像连接成九通道输出,九通道输出和预设置的真实标签输入到训练好的生成对抗网络中,得到高质量拼接图像。本发明专利技术能获得一个高质量的拼接结果。本发明专利技术能获得一个高质量的拼接结果。本发明专利技术能获得一个高质量的拼接结果。

【技术实现步骤摘要】
基于RGB相似度特征匹配的图像拼接方法、装置及设备


[0001]本专利技术涉及图像处理
,尤其涉及一种基于RGB相似度特征匹配的图像拼接方法、装置及设备。

技术介绍

[0002]图像拼接图像拼接是图像处理领域中的一项重要技术,其旨在将不同视角获得的图像拼接成一张更大的图像,以获得高分辨率、宽视角的图像。其技术应用范围十分广泛,如相机超宽视角图像的合成、宇宙空间探测、海底勘测、医学成像、虚拟现实、地质勘测、遥感技术以及视频压缩等领域,因此图像拼接的质量显得尤为重要。
[0003]目前图像拼接技术主要分为传统拼接方法和基于深度学习的方法。传统的图像拼接方法主要分为两大分支,一个分支是基于区域的图像配准,其利用图像像素间相关性强度大小进行对齐,首先,在一个图像中选择兴趣点,然后在另一个图像中利用互相关搜索对应的像素点;另一个则是基于特征的图像配准,其通过提取图像中明显的块、线和点作为特征来估算图像间的变换矩阵,首先,通过提取待配准的图像的特征,然后进行图像特征匹配,然后通过匹配的特征估算得出图像间的变换矩阵,最后利用变换矩阵将图像对齐。本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于RGB相似度特征匹配的图像拼接方法,其特征在于,所述拼接方法包括:基于ResNeXt分组卷积和注意力机制,提取待拼接图像的特征信息,对所述特征信息进行L1正则化处理后计算两个所述待拼接图像之间的特征全局相似性,并计算预测偏移量,基于所述预测偏移量,估计出至少两个所述待拼接图像之间变化的单应性矩阵;基于自适应空间变换网络SA

STN,基于所述待拼接图像、所述单应性矩阵和单位矩阵,使得所述待拼接图像变形得到变换图像,根据至少两个所述变换图像的特征区域的像素点RGB相似度,进行所述特征信息的匹配并确定最优匹配,生成初步拼接图像;将所述初步拼接图像、至少两个所述变换图像连接成九通道输出,所述九通道输出包含有所述待拼接图像的所述特征信息和所述初步拼接图像,将所述九通道输出和预设置的真实标签输入到训练好的生成对抗网络中,得到高质量拼接图像。2.根据权利要求1所述的基于RGB相似度特征匹配的图像拼接方法,其特征在于,在提取所述特征信息前,还包括:对所述待拼接图像进行灰度化处理。3.根据权利要求1所述的基于RGB相似度特征匹配的图像拼接方法,其特征在于,在提取待所述拼接图像的所述特征信息时,包括:基于ResNeXt分组卷积,分别提取出至少两个所述待拼接图像的所述特征信息;基于注意力机制,获取至少两个所述待拼接图像的所述特征信息中的权重高于阈值的部分。4.根据权利要求1所述的基于RGB相似度特征匹配的图像拼接方法,其特征在于,所述基于所述预测偏移量,估计出至少两个所述待拼接图像之间变化的单应性矩阵,包括:所述预测偏移量为其中一个所述待拼接图像相对于另一个所述待拼接图像的四个顶点的横偏移量和纵偏移量;对四个顶点的所述横偏移量和所述纵偏移量进行直接线性变换,估计出所述单应性矩阵。5.根据权利要求1所述的基于RGB相似度特征匹配的图像拼接方法,其特征在于,所述根据至少两个所述变换图像的特征区域的像素点RGB相似度,进行所述特征信息的匹配并确定最优匹配,具体包括:在两个所述变换图像的特征区域中各自任取一点,建立各个点的R、G、B的损失函数;基于所述损失函数,得到两个所述变换图像的所有点的R、G、B的差值;基于所述差值,构建总体损失函数,确定所述最优匹配。6.根据权利要求1所述的基于RGB相似度特征匹配的图像拼接方法,其特征在于,所述生成初步拼接图像,包括:基于所述最优匹配下对应的所述特征信息,将两个所述变换图像的特征区间的像素进行平均融合,得到所述初步拼接图像。7.根据权利要求1所述的基于RGB相似度特征匹配的图像拼接方法,其特征在于,所述基于自适应空间变换网络SA

STN,基于所述待拼接图像、所述单应性矩阵和单位矩阵,使得所述待拼接图像变形,包括:基于自适应空间变换网络SA

STN,对...

【专利技术属性】
技术研发人员:林檎
申请(专利权)人:深圳市碧云祥电子有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1