基于三维地图的视频融合方法、装置、设备及存储介质制造方法及图纸

技术编号:31451136 阅读:26 留言:0更新日期:2021-12-18 11:13
本发明专利技术公开了一种基于三维地图的视频融合方法、装置、设备及计算机可读存储介质;本方案中,在进行视频融合时,通过特征标识将实况环境中每个子区域的像素值填充至三维地图的目标平面,从而实现三维地图中的特定标识与实况环境中相匹配的特征标识的自动识别,减少了视频融合的配置过程中人为因素的影响,实现了视频的自动融合,提高视频融合的效率。提高视频融合的效率。提高视频融合的效率。

【技术实现步骤摘要】
基于三维地图的视频融合方法、装置、设备及存储介质


[0001]本专利技术涉及视频融合
,更具体地说,涉及一种基于三维地图的视频融合方法、装置、设备及计算机可读存储介质。

技术介绍

[0002]随着三维地图应用的广泛使用,三维地图应用也越来越大众,和视频监控相结合的视频融合业务也越来越多,但是视频融合需要繁杂的配置,第一种配置方式为手工配置,利用摄像机投影或者幕布的方式将实况画面匹配到三维场景中,通过手动移动拉伸等操作来使得实况画面能够和三维模型对应上,达到三维融合的效果。但是该方式配置难度大,需要熟练的操作人员,一般用户无法自行操作,摄像机转动后往往会出现偏差,无法自行修正。另一种方式为采用配置工具,利用配置工具来标点配置,这种方式一般由各厂家提供配置工具,由售后人员在三维模型和视频画面中标点,通过点的对应来实现视频与三维模型的匹配,达到三维融合的效果。但是该方式同样需要熟练的操作人员,另外由于取点情况会直接影响配置的好坏,手动选取的点受人为因素影响较大,不利于提高配置的效率和准确率。

技术实现思路

[0003]本专利技术的目的在于提供一种基于三维地图的视频融合方法、装置、设备及计算机可读存储介质,以实现三维地图视频的自动融合。
[0004]为实现上述目的,本专利技术提供一种基于三维地图的视频融合方法,包括:
[0005]获取实况环境中图像采集设备抓拍的第一图像画面,并在三维模型环境中获取与所述图像采集设备对应位置的虚拟相机抓拍的第二图像画面;
[0006]识别所述第一图像画面中的第一特征标识,识别所述第二图像画面中的第二特征标识,所述第一图像画面和所述第二图像画面中对应位置的特征标识相同;
[0007]根据所述第一特征标识的二维坐标将所述第一图像画面划分为不同的第一子区域;根据所述第二特征标识的二维坐标将所述第二图像画面划分为与所述第一子区域对应的第二子区域,并确定每个第二子区域的三维坐标;
[0008]利用每个所述第二子区域的三维坐标创建对应的目标平面,并将每个所述第一子区域的像素值填充至对应的目标平面。
[0009]其中,所述识别所述第一图像画面中的第一特征标识,识别所述第二图像画面中的第二特征标识,包括:
[0010]利用预先设置的特征库识别所述第一图像画面中的特征标识,利用所述特征库识别所述第二图像画面中的特征标识;
[0011]确定所述第一图像画面中的第一特征标识,以及所述第二图像画面中与所述第一特征标识相同的第二特征标识,且所述第一特征标识与对应的第二特征标识的位置距离小于第一预定阈值。
[0012]其中,所述根据所述第一特征标识的二维坐标将所述第一图像画面划分为不同的第一子区域,包括:
[0013]识别所述第一特征标识的第一特征点,并根据每个第一特征点的二维坐标将所述第一图像画面划分为不同的第一子区域;
[0014]相应的,所述根据所述第二特征标识的二维坐标将所述第二图像画面划分为与第一子区域对应的第二子区域,包括:
[0015]识别所述第二特征标识中与所述第一特征点对应的第二特征点;
[0016]根据每个第二特征点的二维坐标将所述第二图像画面划分为,与每个第一子区域对应的第二子区域。
[0017]其中,所述将每个第一子区域的像素值填充至对应的目标平面,包括:
[0018]确定每个第一子区域的像素值;
[0019]利用所述第一特征点的二维特征、所述第二特征点的二维特征,以及每个第一子区域的像素值,确定每个目标平面的待填充像素值;
[0020]根据所述第一子区域的像素值和所述目标平面的待填充像素值,将所述待填充像素值填充至对应的目标平面。
[0021]其中,所述将每个第一子区域的像素值填充至对应的目标平面之后,还包括:
[0022]确定相邻目标平面内的相邻像素点之间的三维空间距离;
[0023]判断所述三维空间距离是否大于第二预定阈值;
[0024]若是,则删除对应的目标平面。
[0025]为实现上述目的,本专利技术进一步提供一种基于三维地图的视频融合装置,包括:
[0026]第一获取模块,用于获取实况环境中图像采集设备抓拍的第一图像画面;
[0027]第二获取模块,用于在三维模型环境中获取与所述图像采集设备对应位置的虚拟相机抓拍的第二图像画面;
[0028]识别模块,用于识别所述第一图像画面中的第一特征标识,识别所述第二图像画面中的第二特征标识,所述第一图像画面和所述第二图像画面中对应位置的特征标识相同;
[0029]第一区域划分模块,用于根据所述第一特征标识的二维坐标将所述第一图像画面划分为不同的第一子区域;
[0030]第二区域划分模块,用于根据所述第二特征标识的二维坐标将所述第二图像画面划分为与所述第一子区域对应的第二子区域;
[0031]坐标确定模块,用于确定每个第二子区域的三维坐标;
[0032]创建模块,用于利用每个所述第二子区域的三维坐标创建对应的目标平面;
[0033]填充模块,用于将每个所述第一子区域的像素值填充至对应的目标平面。
[0034]其中,所述识别模块包括:
[0035]第一识别单元,用于利用预先设置的特征库识别所述第一图像画面中的特征标识;
[0036]第二识别单元,用于利用所述特征库识别所述第二图像画面中的特征标识;
[0037]第一确定单元,用于确定所述第一图像画面中的第一特征标识,以及所述第二图像画面中与所述第一特征标识相同的第二特征标识,且所述第一特征标识与对应的第二特
征标识的位置距离小于第一预定阈值。
[0038]其中,本方案还包括:
[0039]距离确定模块,用于确定相邻目标平面内的相邻像素点之间的三维空间距离;
[0040]判断模块,用于判断所述三维空间距离是否大于第二预定阈值;
[0041]平面删除模块,用于在所述三维空间距离大于第二预定阈值时,删除对应的目标平面。
[0042]为实现上述目的,本专利技术进一步提供一种电子设备,包括:
[0043]存储器,用于存储计算机程序;
[0044]处理器,用于执行所述计算机程序时实现上述的视频融合方法的步骤。
[0045]为实现上述目的,本专利技术进一步提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述的视频融合方法的步骤。
[0046]通过以上方案可知,本专利技术实施例提供的一种基于三维地图的视频融合方法,包括:获取实况环境中图像采集设备抓拍的第一图像画面,并在三维模型环境中获取与图像采集设备对应位置的虚拟相机抓拍的第二图像画面;识别第一图像画面中的第一特征标识,识别第二图像画面中的第二特征标识,第一图像画面和第二图像画面中对应位置的特征标识相同;根据第一特征标识的二维坐标将第一图像画面划分为不同的第一子区域;根据第二特征标识的二维坐标将第二图像画本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种基于三维地图的视频融合方法,其特征在于,包括:获取实况环境中图像采集设备抓拍的第一图像画面,并在三维模型环境中获取与所述图像采集设备对应位置的虚拟相机抓拍的第二图像画面;识别所述第一图像画面中的第一特征标识,识别所述第二图像画面中的第二特征标识,所述第一图像画面和所述第二图像画面中对应位置的特征标识相同;根据所述第一特征标识的二维坐标将所述第一图像画面划分为不同的第一子区域;根据所述第二特征标识的二维坐标将所述第二图像画面划分为与所述第一子区域对应的第二子区域,并确定每个第二子区域的三维坐标;利用每个所述第二子区域的三维坐标创建对应的目标平面,并将每个所述第一子区域的像素值填充至对应的目标平面。2.根据权利要求1所述的视频融合方法,其特征在于,所述识别所述第一图像画面中的第一特征标识,识别所述第二图像画面中的第二特征标识,包括:利用预先设置的特征库识别所述第一图像画面中的特征标识,利用所述特征库识别所述第二图像画面中的特征标识;确定所述第一图像画面中的第一特征标识,以及所述第二图像画面中与所述第一特征标识相同的第二特征标识,且所述第一特征标识与对应的第二特征标识的位置距离小于第一预定阈值。3.根据权利要求1所述的视频融合方法,其特征在于,所述根据所述第一特征标识的二维坐标将所述第一图像画面划分为不同的第一子区域,包括:识别所述第一特征标识的第一特征点,并根据每个第一特征点的二维坐标将所述第一图像画面划分为不同的第一子区域;相应的,所述根据所述第二特征标识的二维坐标将所述第二图像画面划分为与第一子区域对应的第二子区域,包括:识别所述第二特征标识中与所述第一特征点对应的第二特征点;根据每个第二特征点的二维坐标将所述第二图像画面划分为,与每个第一子区域对应的第二子区域。4.根据权利要求3所述的视频融合方法,其特征在于,所述将每个第一子区域的像素值填充至对应的目标平面,包括:确定每个第一子区域的像素值;利用所述第一特征点的二维特征、所述第二特征点的二维特征,以及每个第一子区域的像素值,确定每个目标平面的待填充像素值;根据所述第一子区域的像素值和所述目标平面的待填充像素值,将所述待填充像素值填充至对应的目标平面。5.根据权利要求1至4中任意一项所述的视频融合方法,其特征在于,所述...

【专利技术属性】
技术研发人员:黄黎滨
申请(专利权)人:浙江宇视科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1