一种基于多视点RGBD相机高分辨率人体三维重建方法技术

本发明专利技术提出了一种基于多视点RGBD相机高分辨率人体三维重建方法，该方法包括如下步骤：准备数据训练集；提取图像特征；对空间点进行采样；计算每个采样点投影在多视点相机采集到的图像上的位置，并计算所对应的特征；结合深度摄像机的空间点深度信息，计算每个采样点的psdf作为该采样点对应不同图像特征值融合的权重；利用每个采样点的psdf作为权重对采样点的特征值进行融合，并作为MLP神经网络的输入；通过MLP神经网络预测每个采样点在空间中处于模型表面的概率，从而能完成人体三维模型几何表面重建，采用相同的步骤同样可完成人体三维模型表面纹理重建，从而得到具有高分辨的的人体三维重建模型，该技术可应用于AR/VR交互与远距离交流等领域。互与远距离交流等领域。互与远距离交流等领域。

【技术实现步骤摘要】
一种基于多视点RGBD相机高分辨率人体三维重建方法


[0001]本专利技术涉及到计算机视觉中的三维重建
，尤其涉及到一种基于多视点RGBD相机高分辨率人体三维重建方法。

技术介绍

[0002]近年来随着计算机视觉技术的发展与计算硬件性能的提高，计算机视觉逐步从二维图像处理转向三维重建领域，其中人体模型三维重建是一个研究热点。精确的重建三维人体模型能够为未来的AR/VR交互打下坚实基础。
[0003]从使用的硬件设备上来看，现有的人体模型三维重建方法大多依赖于RGB相机或者RGBD相机，其中RGB相机无法提供深度信息，不可避免地会出现深度模糊现象，重建质量不高；相较之下，RGBD相机能够提供准确的图像深度信息，模型重建效果更好。
[0004]从使用相机的数量上来看，多视点相机标定较为复杂但是能够提供更多信息，重建质量高；单视角相机使用方便，但是信息较少。
[0005]从生成模型的存储方式来看，传统的人体重建大多基于体素(voxel) 表达，是一种显示表达，随着分辨率的提升对存储空间的需求也大幅提升，限制了其模型重建分本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于多视点RGBD相机高分辨率人体三维重建方法，其特征在于，该方法应用于多视点RGBD相机重建人体模型时，包括以下步骤：S1：准备数据训练集，即利用深度摄像机采集真实人体三维模型并进行预处理，对模型进行不同视角、不同光照、不同背景下的渲染，得到二维图像作为网络训练时的输入；S2：提取图像特征，即将多视点相机捕捉的一组图像作为输入，利用卷积神经网络得到每张图像对应的特征图；S3：对空间点进行采样，即在空间中采用基于高斯曲率采样的方式采样n个点；S4：计算每个采样点投影在多视点相机采集到的图像上的位置，并计算所对应的特征；S5：结合深度摄像机的空间点深度信息，计算每个采样点的psdf作为该采样点对应不同图像特征值融合的权重；S6：利用每个采样点的psdf作为权重对采样点的特征值进行融合，并作为MLP神经网络的输入；S7：通过MLP神经网络预测每个采样点在空间中处于模型表面的概率。2.如权利要求...

【专利技术属性】
技术研发人员：于涛，吉朝南，戴翘楚，
申请(专利权)人：北京未澜科技有限公司，
类型：发明
国别省市：