【技术实现步骤摘要】
本专利技术涉及的立体匹配和深度恢复方法,尤其涉及基于联合优化的多摄像机动态场景3D重建方法。
技术介绍
视频的稠密深度恢复技术是计算机中层视觉领域的基础技术之一,其在3D建模、3D影像、增强现实和运动捕获等众多领域中有及其重要的应用。这些应用通常要求深度恢复结果具有很高精度和时空一致性。视频的稠密深度恢复技术的难点在于对于场景中的静态和动态物体,所恢复的深度值具有很高的精度和时空一致性。虽然目前对于静态场景的深度恢复技术已能够恢复具有较高精度的深度信息,但是自然界处处充满了运动的物体,对于视频场景中包含的动态物体来说,现有的深度恢复方法都很难达到较高的精度及时空域上的一致性。这些方法通常要求较多个固定放置的同步摄像机对场景进行捕获,在每个时刻对同步的多目视频帧利用多视图几何的方法进行立体匹配,从而恢复每个时刻的深度信息。而这种拍摄方法更多是被应用于实验室内动态场景的拍摄工作,实际拍摄过程中这种拍摄模式会有很多限制。另外现有的方法在时序上优化深度的过程中,通常利用光流寻找到不同时刻视频帧上对应像素点,然后将对应点的深度值或3D点位置进行线性或曲线拟合,从而估计出当 ...
【技术保护点】
一种基于联合优化的多摄像机动态场景3D重建的方法,其特征在于它的步骤如下:1)利用多视图几何方法结合DAISY特征向量,对于同一时刻的多目视频帧进行立体匹配,得到多目视频每一时刻的初始化深度图,并且对于遮挡区域出现的明显深度错误,利用同步帧之间的可见性图来加以处理以获得更为精确的初始深度;2)利用步骤1)得到的初始化的深度图,每个像素点具有两套变量需要推断:一为像素点深度值,二为像素点静态/动态分类,对像素点给出不同数据项惩罚函数来统一地衡量,对于静态点,用Bundle?Optimization算法其数据项惩罚值,对于动态点,引入时空一致性约束来计算其数据惩罚值,然后迭代地 ...
【技术特征摘要】
1.一种基于联合优化的多摄像机动态场景3D重建的方法,其特征在于它的步骤如下 1)利用多视图几何方法结合DAISY特征向量,对于同一时刻的多目视频帧进行立体匹配,得到多目视频每一时刻的初始化深度图,并且对于遮挡区域出现的明显深度错误,利用同步帧之间的可见性图来加以处理以获得更为精确的初始深度; 2)利用步骤I)得到的初始化的深度图,每个像素点具有两套变量需要推断一为像素点深度值,二为像素点静态/动态分类,对像素点给出不同数据项惩罚函数来统一地衡量,对于静态点,用Bundle Optimization算法其数据项惩罚值,对于动态点,引入时空一致性约束来计算其数据惩罚值,然后迭代地优化方程,从而在优化深度图的同时...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。