一种异构三维多对象融合渲染方法、设备及系统技术方案

技术编号:40055511 阅读:18 留言:0更新日期:2024-01-16 21:52
本发明专利技术公开了一种异构三维多对象融合渲染方法、设备及系统,属于计算机视觉和图形学技术领域,包括步骤:S1,神经辐射场重建:利用神经辐射场对三维场景或对象进行隐式表征,得到隐式表征模型和对应粗略的几何模型;S2,神经辐射场渲染:将隐式表征模型导入到神经辐射场渲染器中进行渲染,得到给定相机位姿下的新视角;S3,渲染:将粗略的几何模型导入到渲染引擎中,产生几何模型在渲染场景中的阴影;S4,多对象场景合成:将渲染引擎中渲染的图片和神经辐射场渲染出来的图片进行合成。本发明专利技术解决了目前多对象或场景三维融合渲染真实性、实时性效果差的问题,促进了神经渲染技术的落地。

【技术实现步骤摘要】

本专利技术涉及计算机视觉和图形学,更为具体的,涉及一种异构三维多对象融合渲染方法、设备及系统


技术介绍

1、通过建模得到对象或场景的几何模型,可以在渲染引擎导入模型,从而制作各种酷炫的三维呈现的应用。然而,通过重建对象或场景得到的模型在渲染时,要么不具备足够高的逼真度,要么因模型需要众多的面片数而耗费巨大的计算资源和存储资源,从而影响了三维场景的逼真渲染。近年来,基于神经辐射场(neural radiance field, nerf)的三维场景和对象表征方法的研究在各种应用上取得了长足的进步,特别是其端到端的场景优化策略,可以足够逼真的渲染出三维对象和场景的细节。

2、然而,基于神经辐射场的这种隐式三维对象和场景表征方法,无法直接与传统的渲染引擎(例如ue,unreal engine)进行适配,从而限制了这一先进三维表征方法的应用。因此,如何将神经辐射场的真实性和传统渲染引擎的实时可操作性相结合成为一个亟需解决的问题。


技术实现思路

1、本专利技术的目的在于克服现有技术的不足,提供一种异构三维多本文档来自技高网...

【技术保护点】

1.一种异构三维多对象融合渲染方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的异构三维多对象融合渲染方法,其特征在于,在步骤S1中,所述利用神经辐射场对三维场景或对象进行隐式表征,得到隐式表征模型和对应粗略的几何模型,包括子步骤:

3.根据权利要求2所述的异构三维多对象融合渲染方法,其特征在于,在步骤S2中,所述将隐式表征模型导入到神经辐射场渲染器中进行渲染,得到给定相机位姿下的新视角,包括子步骤:

4.根据权利要求1所述的异构三维多对象融合渲染方法,其特征在于,

5.根据权利要求1所述的异构三维多对象融合渲染方法,其特征在于,在...

【技术特征摘要】

1.一种异构三维多对象融合渲染方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的异构三维多对象融合渲染方法,其特征在于,在步骤s1中,所述利用神经辐射场对三维场景或对象进行隐式表征,得到隐式表征模型和对应粗略的几何模型,包括子步骤:

3.根据权利要求2所述的异构三维多对象融合渲染方法,其特征在于,在步骤s2中,所述将隐式表征模型导入到神经辐射场渲染器中进行渲染,得到给定相机位姿下的新视角,包括子步骤:

4.根据权利要求1所述的异构三维多对象融合渲染方法,其特征在于,

5.根据权利要求1所述的异构三维多对象融合渲染方法,其特征在于,在步骤s4中,所述将渲染引擎中渲染的图片和神经辐射场渲染出来的图片进行合成,包括子步骤:...

【专利技术属性】
技术研发人员:陈尧森袁琦温序铭
申请(专利权)人:成都索贝数码科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1