辐射场的处理方法、存储介质以及计算机终端技术

技术编号:37717595 阅读:14 留言:0更新日期:2023-06-02 00:14
本申请公开了一种辐射场的处理方法、存储介质以及计算机终端。其中,该方法包括:获取观测图像和辐射场,其中,观测图像用于表征对目标对象进行拍摄所得到的图像,辐射场用于表征利用观测图像对目标对象进行三维重建所得到的重建结果;将辐射场中的空间点投影至观测图像,得到空间点在观测图像上的观测颜色;至少基于辐射场中的空间点的密度信息和观测颜色,构建辐射场的定量处理指标;基于定量处理指标对辐射场的密度信息进行定量处理,得到辐射场的定量处理结果。本申请解决了相关技术中对辐射场的定量处理难度较大的技术问题,达到了提高定量处理三维重建的重建效果的目的。高定量处理三维重建的重建效果的目的。高定量处理三维重建的重建效果的目的。

【技术实现步骤摘要】
辐射场的处理方法、存储介质以及计算机终端


[0001]本申请涉及三维重建领域,具体而言,涉及一种辐射场的处理方法、存储介质以及计算机终端。

技术介绍

[0002]三维内容的生产是扩展现实(ExtendedReality,简称为XR)应用的关键环节之一,人、物、场的三维信息重建与表示为XR应用提供了核心技术支撑。近几年,辐射场结合神经网络和可微体渲染等方法,成为发展热点和前沿。辐射场包含密度信息(即几何信息)和颜色信息。然而,当前情况下,通过测量的方式难以获得辐射场几何真值,从而导致对辐射场的定量处理难度较大。
[0003]针对上述的问题,目前尚未提出有效的解决方案。

技术实现思路

[0004]本申请实施例提供了一种辐射场的处理方法、存储介质以及计算机终端,以至少解决相关技术中对辐射场的定量处理难度较大的技术问题。
[0005]根据本申请实施例的一个方面,提供了一种辐射场的处理方法,包括:获取观测图像和辐射场,其中,观测图像用于表征对目标对象进行拍摄所得到的图像,辐射场用于表征利用观测图像对目标对象进行三维重建所得到的重建结果;将辐射场中的空间点投影至观测图像,得到空间点在观测图像上的观测颜色;至少基于辐射场中的空间点的密度信息和观测颜色,构建辐射场的定量处理指标;基于定量处理指标对辐射场的密度信息进行定量处理,得到辐射场的定量处理结果。
[0006]根据本申请实施例的另一方面,还提供了一种辐射场的处理方法,包括:响应作用于操作界面上的输入指令,在操作界面上显示重建图像和观测图像,其中,重建图像用于表征利用辐射场渲染得到的图像,辐射场用于表征利用观测图像对目标对象进行三维重建所得到的重建结果,观测图像用于表征对目标对象进行拍摄所得到的图像;响应作用于操作界面上的处理指令,在操作界面上显示辐射场的定量处理结果,其中,定量处理结果是基于定量处理指标对辐射场的密度信息进行定量处理所得到的,定量处理指标是至少基于辐射场中的空间点的密度信息和空间点在观测图像上的观测颜色所构建的,观测颜色是将辐射场中的空间点投影至观测图像所得到的。
[0007]根据本申请实施例的另一方面,还提供了一种辐射场的处理方法,包括:在虚拟现实VR设备或增强现实AR设备的呈现画面上展示重建图像和观测图像,其中,重建图像用于表征利用辐射场渲染得到的图像,辐射场用于表征利用观测图像对目标对象进行三维重建所得到的重建结果,观测图像用于表征对目标对象进行拍摄所得到的图像;将辐射场中的空间点投影至观测图像,得到空间点在观测图像上的观测颜色;至少基于辐射场中的空间点的密度信息和观测颜色,构建辐射场的定量处理指标;基于定量处理指标对辐射场的密度信息进行定量处理,得到辐射场的定量处理结果;驱动VR设备或AR设备渲染展示定量处
理结果。
[0008]根据本申请实施例的另一方面,还提供了一种辐射场的处理方法,包括:通过调用第一接口获取观测图像和辐射场,其中,第一接口包括第一参数,第一参数的参数值为观测图像和辐射场,观测图像用于表征对目标对象进行拍摄所得到的图像,辐射场用于表征利用观测图像对目标对象进行三维重建所得到的重建结果;将辐射场中的空间点投影至观测图像,得到空间点在观测图像上的观测颜色;至少基于辐射场中的空间点的密度信息和观测颜色,构建辐射场的定量处理指标;基于定量处理指标对辐射场的密度信息进行定量处理,得到辐射场的定量处理结果;通过调用第二接口输出定量处理结果,其中,第二接口包括第二参数,第二参数的参数值为定量处理结果。
[0009]根据本申请实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行上述实施例中任意一项的辐射场的处理方法。
[0010]根据本申请实施例的另一方面,还提供了一种计算机终端,包括:处理器;存储器,与处理器相连接,用于为处理器提供处理以下处理步骤的指令:获取观测图像和辐射场,其中,观测图像用于表征对目标对象进行拍摄所得到的图像,辐射场用于表征利用观测图像对目标对象进行三维重建所得到的重建结果;将辐射场中的空间点投影至观测图像,得到空间点在观测图像上的观测颜色;至少基于辐射场中的空间点的密度信息和观测颜色,构建辐射场的定量处理指标;基于定量处理指标对辐射场的密度信息进行定量处理,得到辐射场的定量处理结果。
[0011]在本申请实施例中,首先可以获取对目标对象进行拍摄得到的观测图像和利用观测图像对目标对象进行三维重建得到的辐射场,可以将辐射场中的空间点投影至观测图像,得到空间点在观测图像上的观测颜色,然后至少基于辐射场中的空间点的密度信息和观测颜色,构建辐射场的定量处理指标,最后可以基于定量处理指标对辐射场的密度信息进行定量处理,得到辐射场的定量处理结果,实现了对辐射场中密度信息进行定量处理的目的。容易注意到的是,可以通过对真实场景下的辐射场进行观察,提出根据辐射场中空间点的密度信息和观测颜色构建辐射场的定量处理指标,对于辐射场中不同位置的点对应的颜色频率不同,从而其观测颜色不同,因此,密度信息结合观测颜色构建的辐射场的定量处理指标可以实现对辐射场中几何信息的定量处理,可以在定量处理结果较高的情况下实现三维重建和XR应用,从而提高三维重建和XR应用的效果,进而解决了相关技术中对辐射场的定量处理难度较大的技术问题。
[0012]容易注意到的是,上面的通用描述和后面的详细描述仅仅是为了对本申请进行举例和解释,并不构成对本申请的限定。
附图说明
[0013]此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
[0014]图1是根据本申请实施例的一种辐射场的处理方法的虚拟现实设备的硬件环境的示意图;
[0015]图2是根据本申请实施例的一种辐射场的处理方法的计算环境的结构框图;
[0016]图3是根据本申请实施例1的辐射场的处理方法的流程图;
[0017]图4是根据本申请实施例的一种无真值情况下辐射场集合信息的定量处理方法示意图;
[0018]图5是根据本申请实施例2的另一种辐射场的处理方法的流程图;
[0019]图6是根据本申请实施例3的一种辐射场的处理方法的流程图;
[0020]图7是根据本申请实施例4的一中辐射场的处理方法的流程图;
[0021]图8是根据本申请实施例5的一种辐射场的处理装置的示意图;
[0022]图9是根据本申请实施例6的一种辐射场的处理装置的示意图;
[0023]图10是根据本申请实施例7的一种辐射场的处理装置的示意图;
[0024]图11是根据本申请实施例8的一种图像处理装置的示意图;
[0025]图12是根据本申请实施例的一种计算机终端的结构框图。
具体实施方式
[0026]为了使本
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种辐射场的处理方法,其特征在于,包括:获取观测图像和辐射场,其中,所述观测图像用于表征对目标对象进行拍摄所得到的图像,所述辐射场用于表征利用所述观测图像对所述目标对象进行三维重建所得到的重建结果;将所述辐射场中的空间点投影至所述观测图像,得到所述空间点在所述观测图像上的观测颜色;至少基于所述辐射场中的空间点的密度信息和所述观测颜色,构建所述辐射场的定量处理指标;基于所述定量处理指标对所述辐射场的密度信息进行定量处理,得到所述辐射场的定量处理结果。2.根据权利要求1所述的方法,其特征在于,至少基于所述辐射场中的空间点的密度信息和所述观测颜色,构建所述辐射场的定量处理指标,包括:确定所述空间点到目标原点的透明度,其中,所述目标原点用于表征所述观测图像对应的拍摄设备的原点;利用预设基函数对所述观测颜色进行拟合,得到所述空间点对应的目标颜色;利用所述密度信息、所述透明度和所述目标颜色,构建所述定量处理指标。3.根据权利要求2所述的方法,其特征在于,确定所述空间点到目标原点的透明度,包括:确定所述空间点到所述目标原点的射线;基于所述射线上的目标点在所述辐射场中的密度值,确定所述透明度。4.根据权利要求2所述的方法,其特征在于,所述预设基函数包含多个函数,其中,利用预设基函数对所述观测颜色进行拟合,得到所述空间点对应的目标颜色,包括:确定所述多个函数中的第一个函数对应的拟合颜色为所述观测颜色;基于所述第一个函数、所述第一个函数对应的拟合颜色和所述透明度,确定所述第一个函数对应的权重值;基于所述观测颜色、所述第一个函数和所述第一个函数对应的权重值,确定位于所述第一个函数之后的第二函数对应的拟合颜色;基于所述第二函数、所述第二函数对应的拟合颜色和所述透明度,确定所述第二函数对应的权重值;将所述第二函数作为所述第一个函数,并重复执行确定所述第二函数对应的拟合颜色以及确定所述第二函数对应的权重值的步骤,直至所述第二函数为所述多个函数中的最后一个函数;确定所述最后一个函数对应的拟合颜色为所述目标颜色。5.根据权利要求4所述的方法,其特征在于,在所述观测图像包括多个图像的情况下,基于所述第一个函数、所述第一个函数对应的拟合颜色和所述透明度,确定所述第一个函数对应的权重值,包括:确定所述第一个函数中不同图像对应的子函数,所述透明度中所述不同图像对应的子透明度,以及所述第一个函数对应的拟合颜色中所述不同图像对应的子拟合颜色;获取所述子函数、所述子透明度和所述子拟合颜色的乘积,得到所述不同图像对应的
子权重值;对所述多个图像对应的子权重值进行求和,得到所述第一个函数对应的权重值。6.根据权利要求2所述的方法,其特征在于,利用所述密度信息、所述透明度和所述目标颜色,构建所述定量处理指标,包括:利用所述密度信息、所述透明度和所述目标颜色,得到所述空间点对应的点颜色;利用所述密度信息和所述透明度,得到所述空间点对应的点密度;基于所述辐射场中的多个空间点对应的点颜色和点密度,构建所述定量处理指标。7.根据权利要求6所述的方法,其特征在于,在所述观测图像包括多个图像的情况下,利用所述密度信息、所述透明度和所述目标颜色,得到所述空间点对应的点颜色,包括:确定所述透明度中不同图像对应的子透明度,以及所述目标颜色中所述不同图像对应的子目标颜色;基于所述子透明度、所述子目标颜色和所述密度信息,得到所述不同图像对应的子颜色;基于所述多个图像对应的子颜色之和,得到所述点颜色。8.根据权利要求6所述的方法,其特征在于,在所述观测图像包括多个图像的情况下,利用所述密度信息和所述透明度,得到所述空间点对应的点密度,包括:确定所述透明度中不同图像对应的子透明度...

【专利技术属性】
技术研发人员:宋亚斐申丽
申请(专利权)人:阿里巴巴中国有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1