图像拼接的处理方法、装置和电子系统制造方法及图纸

本发明专利技术提供了一种图像拼接的处理方法、装置和电子系统，包括：获取待拼接的第一图像和第二图像的重叠区域分别对应的第一重叠图像和第二重叠图像；确定第一重叠图像和第二重叠图像对应的融合能量图；确定融合能量图的第一图边至第二图边对应的最小能量路径；基于最小能量路径确定第一重叠图像对应的第一掩模和第二重叠图像对应的第二掩模；基于第一掩模和第二掩模拼接第一图像和第二图像。本发明专利技术在一定程度上优化了拼缝经过的区域，提升了图像的拼接效果。

【技术实现步骤摘要】
图像拼接的处理方法、装置和电子系统
本专利技术涉及图像处理
，尤其是涉及一种图像拼接的处理方法、装置和电子系统。
技术介绍
图像拼接任务是将具有重叠视场的多幅图像组合在一起以获得大视场角的高分辨率图片，然而由于视差大、场景景深差异等影响，重叠区域部分的图像内容难以完全对齐，从而导致拼接结果出现鬼影、物体截断等问题。通过拼缝搜索可以一定程度缓解重叠区域部分的图像内容对不齐对拼接造成的影响。当前主流的拼缝搜索方式是基于graphcut(图割)算法进行的，该算法通过图像像素值差异等定义的能量函数，搜索图像局部区域的最小能量路径，然而局部区域的能量最小化，对于差异不明显的重要区域(有显著性目标所在区域等)，也可能属于能量最小化的位置，进而被确定为拼缝，影响了后续图像拼接的效果。
技术实现思路
有鉴于此，本专利技术的目的在于提供一种图像拼接的处理方法、装置和电子系统，以提升图像的拼接效果。第一方面，本专利技术实施例提供了一种图像拼接的处理方法，所述方法应用于电子设备，包括：获取待拼接的第一图像和第二图像的重叠区域本文档来自技高网...

【技术保护点】
1.一种图像拼接的处理方法，其特征在于，所述方法应用于电子设备，包括：/n获取待拼接的第一图像和第二图像的重叠区域分别对应的第一重叠图像和第二重叠图像；/n确定所述第一重叠图像和所述第二重叠图像对应的融合能量图；其中，所述融合能量图中对应于所述第一重叠图像和所述第二重叠图像中的目标位置的像素能量值高于其它位置的像素能量值；所述目标位置包括边缘位置和显著区域对应的位置；/n确定所述融合能量图的第一图边至第二图边对应的最小能量路径；其中，所述第一图边和所述第二图边为具有相对关系的图边；/n基于所述最小能量路径确定所述第一重叠图像对应的第一掩模和所述第二重叠图像对应的第二掩模；其中，所述第一掩模与所...

【技术特征摘要】
1.一种图像拼接的处理方法，其特征在于，所述方法应用于电子设备，包括：
获取待拼接的第一图像和第二图像的重叠区域分别对应的第一重叠图像和第二重叠图像；
确定所述第一重叠图像和所述第二重叠图像对应的融合能量图；其中，所述融合能量图中对应于所述第一重叠图像和所述第二重叠图像中的目标位置的像素能量值高于其它位置的像素能量值；所述目标位置包括边缘位置和显著区域对应的位置；
确定所述融合能量图的第一图边至第二图边对应的最小能量路径；其中，所述第一图边和所述第二图边为具有相对关系的图边；
基于所述最小能量路径确定所述第一重叠图像对应的第一掩模和所述第二重叠图像对应的第二掩模；其中，所述第一掩模与所述第二掩模对应像素的像素值之和均为1；
基于所述第一掩模和所述第二掩模拼接所述第一图像和所述第二图像，得到拼接图像。


2.根据权利要求1所述的方法，其特征在于，确定所述第一重叠图像和所述第二重叠图像对应的融合能量图的步骤，包括：
确定所述第一重叠图像对应的第一边缘能量图和所述第二重叠图像对应的第二边缘能量图；
确定所述第一重叠图像对应的第一显著能量图和所述第二重叠图像对应的第二显著能量图；
合并所述第一显著能量图和所述第二显著能量图，得到显著能量合并图；
根据所述显著能量合并图、所述第一边缘能量图和所述第二边缘能量图确定所述第一重叠图像和所述第二重叠图像对应的融合能量图。


3.根据权利要求2所述的方法，其特征在于，根据所述显著能量合并图、所述第一边缘能量图和所述第二边缘能量图确定所述第一重叠图像和所述第二重叠图像对应的融合能量图的步骤，包括：
根据所述第一图像和所述第二图像的拼接方式，确定所述第一边缘能量图对应的增强能量区域；其中，所述拼接方式包括左右拼接或上下拼接；
对所述增强能量区域乘以第一设定值，得到第一边缘增强能量图；其中，所述第一设定值大于1；
根据所述显著能量合并图、所述第一边缘增强能量图和所述第二边缘能量图确定所述第一重叠图像和所述第二重叠图像对应的融合能量图。


4.根据权利要求3所述的方法，其特征在于，根据所述显著能量合并图、所述第一边缘增强能量图和所述第二边缘能量图确定所述第一重叠图像和所述第二重叠图像对应的融合能量图的步骤，包括：
对所述显著能量合并图、所述第一边缘增强能量图和所述第二边缘能量图进行加权求和，得到所述第一重叠图像和所述第二重叠图像对应的融合能量图。


5.根据权利要求3或4所述的方法，其特征在于，根据所述显著能量合并图、所述第一边缘增强能量图和所述第二边缘能量图确定所述第一重叠图像和所述第二重叠图像对应的融合能量图的步骤，包括：
如果所述第一重叠图像包含黑边区域，获取所述第一重叠图像的黑边区域对应的黑边区域能量图；
如果所述第二重叠图像包含黑边区域，获取所述第二重叠图像的黑边区域对应的黑边区域能量图；
将获取到的所述黑边区域能量图乘以第二设定值，得到黑边区域能量增强图，其中，所述第二设定值大于1；
对所述显著能量合并图、所述第一边缘增强能量图、所述第二边缘能量图和所述黑边区域能量增强图进行加权求和，得到所述第一重叠图像和所述第二重叠图像对应的融合能量图。


6.根据权利要求2所述的方法，其特征在于，合并所述第一显著能量图和所述第二显著能量图，得到显著能量合并图的步骤，包括：
对于显著能量合并图中的每个像素，该像素对应的像素值max_value＝max(tar_overlap_salient，src_overlap_salient)；其中，tar_overlap_salient为所述第一显著能量图中的该像素对应的第一像素值；src_overlap_salient为所述第二显著能量图中的该像素对应的第二像素值；max函数为取所述第一像素值和所述第二像素值中的最大值。


7.一种图像拼接的处理方法，其特征在于，所述方法应用于电子设备，包括：
获取待拼接的第一图像和第二图像的重叠区域分别对应的第一重叠图像和第二重叠图像；
将所述第一重叠图像和所述第二重叠图像输入训练后的图像分割网络，得到所述图像分割网络输出的图像分割结果；其中，所述图像分割网络训练过程中的图像样本对对应有掩模真值对，所述掩模真值对是基于所述图像样本对对应的融合能量图对应的最小能量路径确定的，其中，所述融合能量图中对应于所述图像样本对的目标位置的像素能量值高于其它位置的像素能量值；所述目标位置包括边缘位置和显著区域对应的位置；
基于所述图像分割结果确定所述第一重叠图像对应的第一掩模和所述第二重叠图像对应的第二掩模；其中，所述第一掩模与所述第二掩模对应...

【专利技术属性】
技术研发人员：刘伟舟，胡晨，周舒畅，
申请(专利权)人：北京迈格威科技有限公司，
类型：发明
国别省市：北京;11