当前位置: 首页 > 专利查询>浙江大学专利>正文

基于联合优化的多摄像机动态场景3D重建方法技术

技术编号:8594433 阅读:255 留言:0更新日期:2013-04-18 07:47
本发明专利技术公开了一种基于联合优化的多摄像机动态场景3D重建的方法。能够对时空一致态分割,方法鲁棒而且不需要对于背景的先验知识。此方法允许参与拍摄的多目摄性深度恢复和静态/动态双层分割同时进行求解,亦不需要精确的静态/动像机自由独立地移动,能处理仅个的摄像机拍摄的动态场景。步骤如下:利用每个时刻的跨越个摄像机的同步视频帧来初始化时刻的深度图;二、展开时空一致性深度优化及静态/动态双层分割,迭代地执行轮的时空一致性优化,实现高质量的动态3D重建。本发明专利技术不需要精确的静态/动态分割,并且对于复杂场景所产生的错误分割信息会更具有鲁棒性,在3D立体影像、3D动画、增强现实和运动捕获等领域将会有很高的应用价值。

【技术实现步骤摘要】

本专利技术涉及的立体匹配和深度恢复方法,尤其涉及基于联合优化的多摄像机动态场景3D重建方法
技术介绍
视频的稠密深度恢复技术是计算机中层视觉领域的基础技术之一,其在3D建模、3D影像、增强现实和运动捕获等众多领域中有及其重要的应用。这些应用通常要求深度恢复结果具有很高精度和时空一致性。视频的稠密深度恢复技术的难点在于对于场景中的静态和动态物体,所恢复的深度值具有很高的精度和时空一致性。虽然目前对于静态场景的深度恢复技术已能够恢复具有较高精度的深度信息,但是自然界处处充满了运动的物体,对于视频场景中包含的动态物体来说,现有的深度恢复方法都很难达到较高的精度及时空域上的一致性。这些方法通常要求较多个固定放置的同步摄像机对场景进行捕获,在每个时刻对同步的多目视频帧利用多视图几何的方法进行立体匹配,从而恢复每个时刻的深度信息。而这种拍摄方法更多是被应用于实验室内动态场景的拍摄工作,实际拍摄过程中这种拍摄模式会有很多限制。另外现有的方法在时序上优化深度的过程中,通常利用光流寻找到不同时刻视频帧上对应像素点,然后将对应点的深度值或3D点位置进行线性或曲线拟合,从而估计出当前帧像素点的深度信息本文档来自技高网...

【技术保护点】
一种基于联合优化的多摄像机动态场景3D重建的方法,其特征在于它的步骤如下:1)利用多视图几何方法结合DAISY特征向量,对于同一时刻的多目视频帧进行立体匹配,得到多目视频每一时刻的初始化深度图,并且对于遮挡区域出现的明显深度错误,利用同步帧之间的可见性图来加以处理以获得更为精确的初始深度;2)利用步骤1)得到的初始化的深度图,每个像素点具有两套变量需要推断:一为像素点深度值,二为像素点静态/动态分类,对像素点给出不同数据项惩罚函数来统一地衡量,对于静态点,用Bundle?Optimization算法其数据项惩罚值,对于动态点,引入时空一致性约束来计算其数据惩罚值,然后迭代地优化方程,从而在优化...

【技术特征摘要】
1.一种基于联合优化的多摄像机动态场景3D重建的方法,其特征在于它的步骤如下 1)利用多视图几何方法结合DAISY特征向量,对于同一时刻的多目视频帧进行立体匹配,得到多目视频每一时刻的初始化深度图,并且对于遮挡区域出现的明显深度错误,利用同步帧之间的可见性图来加以处理以获得更为精确的初始深度; 2)利用步骤I)得到的初始化的深度图,每个像素点具有两套变量需要推断一为像素点深度值,二为像素点静态/动态分类,对像素点给出不同数据项惩罚函数来统一地衡量,对于静态点,用Bundle Optimization算法其数据项惩罚值,对于动态点,引入时空一致性约束来计算其数据惩罚值,然后迭代地优化方程,从而在优化深度图的同时...

【专利技术属性】
技术研发人员:章国锋鲍虎军姜翰青
申请(专利权)人:浙江大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1