一种基于辐射场技术的三维实时重建方法技术

本发明专利技术公开了一种基于辐射场技术的三维实时重建方法，涉及虚拟现实技术领域。包括以下步骤：S1，在三维场景空间部署多个摄像头进行空间数据实时采集，通过网络模块把数据都传输到后端分布式平台上；S2，利用automl深度学习算法获得深度估计切割前景和背景；S3，通过多个摄像头的数据，融合数据，得到粗糙的三维模型，三维模型设定为V0；S4，根据可逆体渲染方法对V0进行精确的重建，利用V

【技术实现步骤摘要】
一种基于辐射场技术的三维实时重建方法


[0001]本专利技术主要涉及虚拟现实
，具体是一种基于辐射场技术的三维实时重建方法。

技术介绍

[0002]各大游戏、智慧园区、VR房屋展示等应用市场对3D内容的需求在近年来 呈指数级增长，而传统的3D内容通常由专业团队或其他人力方式生成。这种 3D内容的获取方式在质量上参差不齐，在时间、资源上费时费力，是社会资源 的巨大损失。
[0003]
技术实现思路

[0004]为解决现有技术的不足，本专利技术提供了一种基于辐射场技术的三维实时重建方法，它能够实时的对场景进行3d重建，然后进行三维传输和直播，在终端进行展示。
[0005]本专利技术为实现上述目的，通过以下技术方案实现：
[0006]一种基于辐射场技术的三维实时重建方法，包括以下步骤：
[0007]S1，在三维场景空间部署多个摄像头进行空间数据实时采集，通过网络模块把数据都传输到后端分布式平台上；
[0008]S2，利用automl深度学习算法获得深度估计切割前景和背景；
[0009]S3，通过多个摄像头的数据，融合数据，得到粗糙的三维模型，三维模型设定为V0；
[0010]S4，根据可逆体渲染方法对V0进行精确的重建，利用V
fine
←
R
‑1(V0)；其中 R
‑
1为体素渲染的逆渲染；
[0011]S5，构建loss方程，C为原始图像，表示预估的值；方程如下所示：
[0012][0013][0014]其中C
i
表示颜色值，P
i
表示入射射线在volume块的占比，体素密度σ(x)定义为光线停留在位置x处无穷小粒子的可导概率，δ
i
＝t
i+1
‑
t
i
是相邻样本之间的距离；
[0015]S6，采用adam方程求解。
[0016]所述网络模块为网线和/或wifi和/或5G。
[0017]对比现有技术，本专利技术的有益效果是：
[0018]本专利技术使用的方法布局多个摄像头，然后每一个角度有一台摄像头负责一个volume区域进行计算，由于每一个角度的互不相干性，可以把空间网格分布到多个机器上进行分布式计算，做到高精度实时三维重建。
具体实施方式
[0019]结合具体实施例，对本专利技术作进一步说明。应理解，这些实施例仅用于说明本专利技术而不用于限制本专利技术的范围。此外应理解，在阅读了本专利技术讲授的内容之后，本领域技术人员可以对本专利技术作各种改动或修改，这些等价形式同样落于本申请所限定的范围。
[0020]一种基于辐射场技术的三维实时重建方法，包括以下步骤：
[0021]S1，在三维场景空间部署多个摄像头进行空间数据实时采集，通过网络模块把数据都传输到后端分布式平台上；
[0022]S2，利用automl深度学习算法获得深度估计切割前景和背景；
[0023]S3，通过多个摄像头的数据，融合数据，得到粗糙的三维模型，三维模型设定为V0；
[0024]S4，根据可逆体渲染方法对V0进行精确的重建，利用V
fine
←
R
‑1(V0)；其中 R
‑
1为体素渲染的逆渲染；
[0025]S5，构建loss方程，C为原始图像，表示预估的值；方程如下所示：
[0026][0027][0028]其中C
i
表示颜色值，P
i
表示入射射线在volume块的占比，体素密度σ(x)定义为光线停留在位置x处无穷小粒子的可导概率，δ
i
＝t
i+1
‑
t
i
是相邻样本之间的距离；
[0029]S6，采用adam方程求解。布局多个摄像头，然后每一个角度有一台摄像头负责一个volume区域进行计算，由于每一个角度的互不相干性，可以把空间网格分布到多个机器上进行分布式计算，做到高精度实时三维重建。
[0030]作为优化，所述网络模块为网线和/或wifi和/或5G。根据模型重建的体量和需求灵活选择适当的网络模块进行数据传输，优化数据的采集和传输。
本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于辐射场技术的三维实时重建方法，包括以下步骤：S1，在三维场景空间部署多个摄像头进行空间数据实时采集，通过网络模块把数据都传输到后端分布式平台上；S2，利用automl深度学习算法获得深度估计切割前景和背景；S3，布局多个摄像头，通过多个摄像头的数据，然后通过每一个角度有一台摄像头负责一个volume区域进行计算的方式融合数据，得到粗糙的三维模型，三维模型设定为V0；S4，根据可逆体渲染方法对V0进行精确的重建，利用V
fine
←
R
‑1(V0)；其中R
‑1为体素渲染的逆渲染；S5，构建loss方程，C为原始图像，表示预估的值；方程如下所示：表示预估...

【专利技术属性】
技术研发人员：赵开勇，
申请(专利权)人：深圳市其域创新科技有限公司，
类型：发明
国别省市：