利用立体成像生成自由视点视频制造技术

本发明专利技术公开了利用立体成像生成自由视点视频。提供了用于利用主动红外（IR）立体模块生成自由视点视频的方法和系统。该方法包括利用主动IR立体模块计算（602）场景的深度图。可以通过下列步骤计算深度图：将IR圆点图样投影到场景上；从两个或更多个同步的IR摄像机中的每个IR摄像机捕获立体图像；检测立体图像内的圆点；计算对应于所述立体图像中的圆点的特征描述符；计算所述立体图像之间的视差图；以及利用所述视差图生成所述深度图。该方法还包括利用所述深度图生成（604）所述场景的点云，生成（606）所述点云的网格并从所述点云的所述网格生成（608）所述场景的投影纹理图。该方法进一步包括利用所述投影纹理图生成（610）所述场景的所述视频。

【技术实现步骤摘要】

【技术保护点】
一种利用主动红外（IR）立体模块（146,702,704）生成视频的方法，包括：利用所述主动IR立体模块（146,702,704）计算（602）场景（708）的深度图（112），其中计算所述深度图（112）包括：将IR圆点图样（726）投影（302）到所述场景（708）上；从两个或更多个同步的IR摄像机（144,710,712,714,716,718,720）中的每个IR摄像机捕获（304）立体图像；检测（306）所述立体图像内的多个圆点；计算（308）对应于所述立体图像中的所述多个圆点的多个特征描述符；计算（310）所述立体图像之间的视差图；以及利用所述视差图生成（312）所述场景（708）的深度图（112）；利用所述深度图（112）在三维空间中生成（604）所述场景（708）的点云（114）；生成（606）所述点云（114）的网格；从所述点云（114）的所述网格生成（608）所述场景（708）的投影纹理图（116）；以及利用所述投影纹理图（116）生成（610）所述场景（708）的所述视频。

【技术特征摘要】
...

【专利技术属性】
技术研发人员：查尔斯·日特尼克，辛·秉·康，亚当·柯克，帕特里克·斯威尼，阿米特·米塔尔，大卫·哈尼特，大卫·埃雷克，干尚·米特拉，克斯图提斯·帕蒂耶尤纳斯，亚龙·埃谢，西蒙·温德，
申请(专利权)人：微软公司，
类型：发明
国别省市：