图像对齐方法、装置、可读存储介质及计算机设备制造方法及图纸

一种图像对齐方法、装置、可读存储介质及计算机设备，该方法包括：获取参考图像对应的深度信息图，并对所述深度信息图进行超像素分割，得到多个超像素区域；根据多个所述超像素区域确定所述参考图像与待匹配图像之间对应的多个区域图像，并计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵；根据所述单应矩阵对所述待匹配图像的每个区域图像进行单应变换，得到映射变换后的多个目标区域图像；将多个所述目标区域图像进行拼接融合处理得到完整的目标待匹配图像。本发明专利技术实施例能达到更好图像对齐的效果，图像间对齐精度高。

【技术实现步骤摘要】
图像对齐方法、装置、可读存储介质及计算机设备
本专利技术涉及图像处理领域，特别是涉及一种图像对齐方法、装置、可读存储介质及计算机设备。
技术介绍
对于多帧夜景图像增强、多帧HDR(高动态范围图像)、多帧图像拼接等多帧合成应用场景，需要计算帧间运动参数对多帧图像对齐。现有技术中，对于平面图像，帧间的运动参数可以用一个单应矩阵精确描述。所述平面图像指的是场景本身是一个平面或者场景目标离摄像头较远可以近似为一个平面。但在实际应用中，拍摄的图像一般为非平面的，一个单应矩阵无法完整描述帧间运动，通过现有技术中的方法进行图像件的对齐精度差，其图像处理效果不理想。
技术实现思路
鉴于上述状况，有必要针对现有技术中图像对齐精度差的问题，提供一种图像对齐方法、装置、可读存储介质及计算机设备。一种图像对齐方法，包括：获取参考图像对应的深度信息图，并对所述深度信息图进行超像素分割，得到多个超像素区域；根据多个所述超像素区域确定所述参考图像与待匹配图像之间对应的多个区域图像，并计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵；根据所述单应矩阵对所述待匹配图像的每个区域图像进行单应变换，得到映射变换后的多个目标区域图像；将多个所述目标区域图像进行拼接融合处理得到完整的目标待匹配图像。上述图像对齐方法，其中，所述计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵的步骤包括：提取所述参考图像和所述待匹配图像的区域图像的特征点集合；根据所述参考图像和所述待匹配图像之间的对应区域图像的特征点集合，求解各对应的区域图像之间的单应矩阵。上述图像对齐方法，其中，所述获取参考图像对应的深度信息图的步骤包括：获取所述参考图像对应的场景的另一拍摄视角的图像；采用立体匹配算法对所述图像和所述参考图像进行处理得到所述参考图像的深度信息图。上述图像对齐方法，其中，所述对所述待匹配图像和所述参考图像的深度信息图进行超像素分割，得到多个超像素区域的步骤包括：基于SLIC超像素分割算法，根据所述深度信息图的像素距离信息以及像素邻近性信息，将所述深度信息图划分为多个超像素区域。上述图像对齐方法，其中，所述深度信息图划分为多个超像素区域的公式包括：dd＝abs(dispartyi-dispartyk)；dxy＝abs(xi-xk)+abs(yi-yk)；dist＝dd+k*dxy；其中，dd表示的是第k个种子周边2S*2S邻域内的第i个像素处的视差值与种子k坐标点处视差值的差；dispartyi表示这第k个种子点周围2S*2S范围内的第i个像素点的视差值；dxy表示距离邻近性；yk和xk，分别表示的是第k个种子的坐标点；xi和yi分别表示第k个种子点周围2S*2S范围第i个像素的坐标值。上述图像对齐方法，其中，所述将多个所述目标区域图像进行拼接处理得到完整的目标待匹配图像的步骤包括：将每个所述目标区域进行边界沿拓，对沿拓后的目标区域图像进行拼接融合处理得到完整的目标待匹配图像。本专利技术实施例还提供了一种图像对齐装置，包括：获取模块，用于获取参考图像对应的深度信息图；分割模块，用于对所述深度信息图进行超像素分割，得到多个超像素区域；确定模块，用于根据多个所述超像素区域确定所述参考图像与待匹配图像之间对应的多个区域图像；计算模块，用于计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵；单应矩阵变换模块，用于根据所述单应矩阵对所述待匹配图像的每个区域图像进行单应变换，得到映射变换后的多个目标区域图像；拼接融合处理模块，用于将多个所述目标区域图像进行拼接融合处理得到完整的目标待匹配图像。上述图像对齐装置，其中，所述计算模块包括：提取模块，用于提取所述参考图像和所述待匹配图像的区域图像的特征点集合；计算子模块，用于根据所述参考图像和所述待匹配图像之间的对应区域图像的特征点集合，求解各对应的区域图像之间的单应矩阵。上述图像对齐装置，其中，所述获取模块用于：获取所述参考图像对应的场景的另一拍摄视角的图像；采用立体匹配算法对所述图像和所述参考图像进行处理得到所述参考图像的深度信息图。上述图像对齐装置，其中，分割模块具体用于：基于SLIC超像素分割算法，根据所述深度信息图的像素距离信息以及像素邻近性信息，将所述深度信息图划分为多个超像素区域。上述图像对齐装置，其中，所述深度信息图划分为多个超像素区域的公式包括：dd＝abs(dispartyi-dispartyk)；dxy＝abs(xi-xk)+abs(yi-yk)；dist＝dd+k*dxy；其中，dd表示的是第k个种子周边2S*2S邻域内的第i个像素处的视差值与种子k坐标点处视差值的差；dispartyk表示的是第k个种子点的视差值；dispartyi表示这第k个种子点周围2S*2S范围内的第i个像素点的视差值；dxy表示距离邻近性；yk和xk，分别表示的是第k个种子的坐标点；xi和yi分别表示第k个种子点周围2S*2S范围第i个像素的坐标值。上述图像对齐装置，其中，拼接融合处理模块具体用于将每个所述目标区域进行边界沿拓，对沿拓后的目标区域图像进行拼接融合处理得到完整的目标待匹配图像。本专利技术实施例还提供了一种可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现上述任意一项所述的方法的步骤。本专利技术实施例还提供了一种计算机设备，包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述任意一项所述的方法的步骤。本专利技术实施例中，获取参考图像的深度图像，并对深度图像进行超像素分割，得到多个超像素区域。对于每一个超像素区域图像，在参考图像和待匹配图像中的对应区域计算各自区域的单应矩阵。并根据单应矩阵对待匹配图像进行单应变换，得到映射变换后的多个目标区域图像，再对该多个目标区域图像进行拼接融合处理即可得到对齐后的完整待匹配图像。本实施例的参考图像和待匹配图像的区域划分与深度信息图的区域分划对应，都是依据场景距离信息，自适应分割为多个区域，对不同的区域使用不同的单应矩阵进行对齐，能达到更好的效果，图像间对齐精度高。附图说明图1为本专利技术第一实施例中的图像对齐方法的流程图；图2a为深度信息图的分割区域示意图；图2b为参考图像的分割区域示意图；图2c为待匹配图像的分割区域示意图；图3为本专利技术第二实施例中的图像对齐方法的流程图；图4为边缘沿拓后的待匹配图像的示意图；图5为本专利技术第三实施例中的图像对齐装置的结构框图；图6为本专利技术实施例中计算机设备的结构框图。具体实施方式下面详细描述本专利技术的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本专利技术，而不能理解为对本专利技术的限制。参照下面的描述和附图，将清楚本专利技术的实施例的这些和其他方面。在这些描述和附图中，具体公开了本专利技术的实施例中的一些特定实施方式，来表示实施本专利技术的实施例的原理的一些方式，但是应当理解，本专利技术的实施例的范围不受此限制。相反，本专利技术的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。请参阅图1，为本专利技术第一实施例中的图像对齐方法，包括步骤S11～S14。步骤S11，获取参考图像本文档来自技高网...

【技术保护点】
1.一种图像对齐方法，其特征在于，包括：获取参考图像对应的深度信息图，并对所述深度信息图进行超像素分割，得到多个超像素区域；根据多个所述超像素区域确定所述参考图像与待匹配图像之间对应的多个区域图像，并计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵；根据所述单应矩阵对所述待匹配图像的每个区域图像进行单应变换，得到映射变换后的多个目标区域图像；将多个所述目标区域图像进行拼接融合处理得到完整的目标待匹配图像。

【技术特征摘要】
1.一种图像对齐方法，其特征在于，包括：获取参考图像对应的深度信息图，并对所述深度信息图进行超像素分割，得到多个超像素区域；根据多个所述超像素区域确定所述参考图像与待匹配图像之间对应的多个区域图像，并计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵；根据所述单应矩阵对所述待匹配图像的每个区域图像进行单应变换，得到映射变换后的多个目标区域图像；将多个所述目标区域图像进行拼接融合处理得到完整的目标待匹配图像。2.如权利要求1所述的图像对齐方法，其特征在于，所述计算所述参考图像和待匹配图像对应的区域图像之间的单应矩阵的步骤包括：提取所述参考图像和所述待匹配图像的区域图像的特征点集合；根据所述参考图像和所述待匹配图像之间的对应区域图像的特征点集合，求解各对应的区域图像之间的单应矩阵。3.如权利要求1所述的图像对齐方法，其特征在于，所述获取参考图像对应的深度信息图的步骤包括：获取所述参考图像对应的场景的另一拍摄视角的图像；采用立体匹配算法对所述图像和所述参考图像进行处理得到所述参考图像的深度信息图。4.如权利要求1所述的图像对齐方法，其特征在于，所述对所述待匹配图像和所述参考图像的深度信息图进行超像素分割，得到多个超像素区域的步骤包括：基于SLIC超像素分割算法，根据所述深度信息图的像素距离信息以及像素邻近性信息，将所述深度信息图划分为多个超像素区域。5.如权利要求4所述的图像对齐方法，其特征在于，所述深度信息图划分为多个超像素区域的公式包括：dd＝abs(dispartyi-dispartyk)；dxy＝abs(xi-xk)+abs(yi-yk)；dist＝dd+k*dxy；其中，dd表示的是第k个种子周边2S*2S邻域内的第i个像素处的视差值与种子k坐标点处视差值的差；dispartyk表示的是...

【专利技术属性】
技术研发人员：邹超洋，
申请(专利权)人：广州视源电子科技股份有限公司，
类型：发明
国别省市：广东,44