【技术实现步骤摘要】
红外光图像和可见光图像的对齐方法、装置和电子设备
[0001]本公开涉及人工智能
,具体为图像处理和深度学习
,尤其涉及一种红外光图像和可见光图像的对齐方法、装置和电子设备存储介质。
技术介绍
[0002]目前红外光图像和可见光图像对齐的方法,可以基于手动操作调整的方法,即通过手动缩放、平移相机图像的方法来对齐图像,还可以基于预设标定参数方法,即预设好图像的映射参数,然后通过映射计算来对齐图像,还可以基于相机标定的方法,即通过标定相机的相关参数,然后选定对齐图像间的特征点,然后基于相机参数和特征点获得对齐图像间的映射关系,并通过映射关系实现图像对齐。然而,基于手动操作调整的方法要求操作人员对于图像的缩放、平移等变换操作具有一定的经验,不同的操作人可能操作经验的不同,对齐结果也不同,可复现性效果较差,基于预设参数的方法可能无法适应变化的应用场景,泛用性较差,基于相机标定的方法较为复杂不具备操作的简便性,因此,如何提高红外光图像和可见光图像对齐的效率,并保证红外光图像和可见光图像对齐的精度,已成为亟待解决的问题。
技术实现思路
[0003]本公开提供了一种红外光图像和可见光图像的对齐方法、装置、电子设备、存储介质及程序产品。
[0004]根据第一方面,提供了一种红外光图像和可见光图像的对齐方法,包括:对初始红外图像和初始可见光图像进行去畸变操作,获取第一红外光图像和第一可见光图像;根据所述第一红外光图像和所述第一可见光图像,确定第一映射矩阵,并基于所述第一映射矩阵对所述第一可见光图像进 ...
【技术保护点】
【技术特征摘要】
1.一种红外光图像和可见光图像的对齐方法,其中,包括:对初始红外图像和初始可见光图像进行去畸变操作,获取第一红外光图像和第一可见光图像;根据所述第一红外光图像和所述第一可见光图像,确定第一映射矩阵,并基于所述第一映射矩阵对所述第一可见光图像进行粗对齐操作,获取第二可见光图像;根据所述第一红外光图像和所述第一可见光图像,确定第二映射矩阵,并基于所述第二映射矩阵对所述第二可见光图像进行精对齐操作,获取第三可见光图像。2.根据权利要求1所述的方法,其中,所述根据所述第一红外光图像和所述第一可见光图像,确定第一映射矩阵,并基于所述第一映射矩阵对所述第一可见光图像进行粗对齐操作,获取第二可见光图像,包括:从所述第一红外光图像和所述第一可见光图像中,选取满足设定条件的多个参考点,并基于所述多个参考点确定所述第一映射矩阵;对所述第一可见光图像的像素点和所述第一映射矩阵做矩阵运算,得到所述第二可见光图像。3.根据权利要求2所述的方法,其中,所述从所述第一红外光图像和所述第一可见光图像中,选取满足设定条件的多个参考点,包括:从所述第一红外光图像和所述第一可见光图像进行物体识别,从中确定同一个物体为参考物体;从所述第一红外光图像和所述第一可见光图像中,各自选取属于所述参考物体同一表面上的预设个数的参考点。4.根据权利要求1所述的方法,其中,所述根据所述第一红外光图像和所述第一可见光图像,确定第二映射矩阵,并基于所述第二映射矩阵对所述第二可见光图像进行精对齐操作,获取第三可见光图像,包括:从所述第一红外光图像和所述第一可见光图像中,确定目标图像;获取所述目标图像和所述第二可见光图像之间的第一匹配特征点对;获取所述第一匹配特征点对中所述第二可见光图像上的第一特征点,并将所述第二可见光图像上的第一特征点逆向映射至所述第一可见光图像;获取所述目标图像和逆向映射后的第一可见光图像之间的第二匹配特征点对;根据所述第二匹配特征点对,确定所述第二映射矩阵;对所述第二可见光图像的像素点和所述第二映射矩阵做矩阵运算,得到所述第三可见光图像。5.根据权利要求4所述的方法,其中,所述获取所述目标图像和所述第二可见光图像之间的第一匹配特征点对,包括:对所述目标图像和所述第二可见光图像进行特征点匹配,得到第一候选匹配特征点对;对所述第一候选匹配点对进行随机抽样一致处理,去除所述第一候选匹配点对中的离群特征点,得到所述第一匹配特征点对。6.根据权利要求4所述的方法,其中,所述将所述第二可见光图像上的第一特征点逆向映射至所述第一可见光图像,包括:
确定所述第一映射矩阵的映射逆矩阵;基于所述映射逆矩阵,将所述第二可见光图像中的第一特征点,逆向映射至所述第一可见光图像。7.根据权利要求3
‑
6中任一项所述的方法,其中,所述获取所述目标图像和逆向映射后的第一可见光图像之间的第二匹配特征点对,包括:对所述目标图像和所述逆向映射后的第一可见光图像进行特征点匹配,得到第二候选匹配特征点对;对所述第二候选匹配点对进行随机抽样一致处理,去除所述第二候选匹配点对中的离群特征点,得到所述第二匹配特征点对。8.根据权利要求4
‑
7中任一项所述的方法,其中,所述从所述第一红外光图像和所述第一可见光图像中,确定目标图像,包括:获取所述第一红外光图像的第一分辨率;获取所述第一可见光图像的第二分辨率;选取所述第一分辨率和所述第二分辨率中高分辨率对应的图像,作为所述目标图像。9.根据权利要求1
‑
7中任一项所述的方法,其中,所述对初始红外图像和初始可见光图像进行去畸变操作,获取第一红外光图像和第一可见光图像,包括:对红外相机和可见光相机分别进行单目标定,获取各自的相机内参和畸变参数;基于所述红外相机的相机内参和畸变参数,对所述初始红外图像进行去畸变操作,获取所述第一红外光图像;基于所述可见光相机的相机内参和畸变参数,对所述初始可见光图像进行去畸变操作,获取所述第一可见光图像。10.一种红外光图像和可见...
【专利技术属性】
技术研发人员:吴科,聂磊,
申请(专利权)人:北京百度网讯科技有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。