虚拟视点图像生成方法及装置制造方法及图纸

本发明专利技术涉及图像处理技术领域，提供一种虚拟视点图像生成方法及装置，方法包括：基于原始视点图像的位姿信息，确定虚拟视点和所述虚拟视点的成像平面；基于所述原始视点图像的深度信息，确定所述虚拟视点到所述成像平面上各像素点间的光线的搜索步进范围；基于所述搜索步进范围对各条光线进行搜索，确定所述各条光线上的重建点；基于所述原始视点图像的色彩信息对所述各条光线上的重建点进行着色，生成虚拟视点图像。本发明专利技术能够进行快速且高质量的虚拟视点图像生成。拟视点图像生成。拟视点图像生成。

【技术实现步骤摘要】
虚拟视点图像生成方法及装置


[0001]本专利技术涉及图像处理
，尤其涉及一种虚拟视点图像生成方法及装置。

技术介绍

[0002]随着计算机科学和显示技术的不断发展，三维显示技术以其丰富的应用场景成为了显示领域最前沿、最热门的高新技术。视点图绘制是三维显示技术的关键环节，在虚拟视点图绘制任务过程中，巨大数据量的深度视频流和彩色视频流会使得绘制任务运算量急剧增长，常规算法难以实现虚拟视点图像的实时生成。
[0003]传统的视点图生成算法，数据处理量很大，算法本身对硬件的计算能力和存储能力要求很高，此外，需要较为密集的采集设备捕获多路彩色视频流或RGBD视频流，难以满足一些场景对于稀疏捕获设备的要求。针对基于稀疏视频流的虚拟视点图绘制任务，传统算法受硬件和环境因素的影响，前期采集的深度图存在噪声和空洞，生成虚拟视点图质量很差，易造成信息缺失和伪影。深度图的噪声及算法在新视点下重建表面的误差使得生成的新视点图存在空洞且边缘模糊，难以满足三维显示的观看需求。因此，一种高质量的实时虚拟视点图像生成技术对全息视频通信和实时三维显示的发展至关重本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟视点图像生成方法，其特征在于，包括：基于原始视点图像的位姿信息，确定虚拟视点和所述虚拟视点的成像平面；基于所述原始视点图像的深度信息，确定所述虚拟视点到所述成像平面上各像素点间的光线的搜索步进范围；基于所述搜索步进范围对各条光线进行搜索，确定所述各条光线上的重建点；基于所述原始视点图像的色彩信息对所述各条光线上的重建点进行着色，生成虚拟视点图像。2.根据权利要求1所述的虚拟视点图像生成方法，其特征在于，所述基于所述原始视点图像的深度信息，确定所述虚拟视点到所述成像平面上各像素点间的光线的搜索步进范围，包括：基于所述原始视点图像的深度图对应的像素坐标系，对所述成像平面上各像素点进行坐标变换；对所述成像平面上进行坐标变换后的各像素点进行光栅化重映射，得到所述进行坐标变换后的各像素点在所述原始视点图像的深度值，将所述深度值的范围确定为所述虚拟视点到所述成像平面上各像素点间的光线的搜索步进范围。3.根据权利要求1或2所述的虚拟视点图像生成方法，其特征在于，所述基于所述搜索步进范围对各条光线进行搜索，确定所述各条光线上的重建点，包括：基于所述搜索步进范围，在所述各条光线上按照搜索步长进行搜索，确定每个搜索步长下所述各条光线上点的目标距离函数值；基于所述各条光线上目标距离函数值发生符号变化的点，确定所述各条光线上的重建点。4.根据权利要求3所述的虚拟视点图像生成方法，其特征在于，所述确定每个搜索步长下所述各条光线上点的目标距离函数值，包括：基于所述原始视点图像的深度信息，确定所述光线对应所述成像平面上像素点的融合权重；基于所述各条光线对应的融合权重，对各条光线上每个搜索步长下点的基于截断的带符号距离函数值进行加权，得到所述各条光线上点的目标距离函数值。5.根据权利要求1所述的虚拟视点图像生成方法，其特征在于，所述基于所述原始视点图像的色彩信息，对所述各条光线上的重建点进行着色，生成虚拟视点图像，...

【专利技术属性】
技术研发人员：于迅博，汲鲁育，邢树军，高鑫，沈圣，张泷，陈硕，桑新柱，颜玢玢，
申请(专利权)人：北京邮电大学，
类型：发明
国别省市：