System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像处理方法、装置、电子设备和计算机可读存储介质制造方法及图纸_技高网

图像处理方法、装置、电子设备和计算机可读存储介质制造方法及图纸

技术编号:41195781 阅读:3 留言:0更新日期:2024-05-07 22:24
本公开提供了一种图像处理方法、装置、电子设备和计算机可读存储介质,该方法包括:获取物体对象的多个图像,多个图像具有不同视角;对多个图像分别进行三维空间采样,得到物体对象所在的目标三维空间的多个第一空间采样点;分别确定多个第一空间采样点在目标三维空间中的空间位置信息和针对物体对象的视角信息;利用预训练的信息预测模型,对待生成的预期视角信息和多个第一空间采样点的空间位置信息和视角信息进行处理,得到与预期视角信息对应的多个第二空间采样点的体积密度和颜色信息;对多个第二空间采样点的体积密度和颜色信息进行体渲染,得到物体对象的与预期视角信息对应的渲染图像。根据本公开的实施例能够提高处理效率。

【技术实现步骤摘要】

本公开涉及计算机视觉领域,特别涉及一种图像处理方法、装置、电子设备和计算机可读存储介质


技术介绍

1、新视图合成是计算机图形学与计算机视觉领域共同关注的重要问题,通过新视图合成可以根据已有图像数据合成新的视图,通过视点合成可以得到照片级别的合成效果。

2、相关技术中,可以基于逆向渲染流程,即从已有的一系列真实场景图像中,恢复出场景的光照、形状和材质等参数信息,然后将这些参数信息结合起来重建更具真实感的渲染。但是该方法在处理过程中需要进行大量参数的恢复,处理效率低。


技术实现思路

1、本公开提供一种图像处理方法、装置、电子设备和计算机可读存储介质,根据该方法,可以根据物体对象的具有不同视角图像,生成与预期视角信息对应的渲染图像,提高图像处理效率。

2、第一方面,本公开提供了一种图像处理方法,该图像处理方法包括:获取物体对象的多个图像,所述多个图像具有不同视角;对所述多个图像分别进行三维空间采样,得到所述物体对象所在的目标三维空间的多个第一空间采样点;分别确定所述多个第一空间采样点在所述目标三维空间中的空间位置信息和针对所述物体对象的视角信息;利用预训练的信息预测模型,对待生成的预期视角信息和所述多个第一空间采样点的空间位置信息和视角信息进行处理,得到与所述预期视角信息对应的多个第二空间采样点的体积密度和颜色信息;对所述多个第二空间采样点的体积密度和颜色信息进行体渲染,得到所述物体对象的与所述预期视角信息对应的渲染图像。

3、第二方面,本公开提供了一种图像处理装置,该图像处理装置包括:获取模块,用于获取物体对象的多个图像,所述多个图像具有不同视角;采样模块,用于对所述多个图像分别进行三维空间采样,得到所述物体对象所在的目标三维空间的多个第一空间采样点;确定模块,用于分别确定所述多个第一空间采样点在所述目标三维空间中的空间位置信息和针对所述物体对象的视角信息;处理模块,用于利用预训练的信息预测模型,对待生成的预期视角信息和所述多个第一空间采样点的空间位置信息和视角信息进行处理,得到与所述预期视角信息对应的多个第二空间采样点的体积密度和颜色信息;渲染模块,用于对所述多个第二空间采样点的体积密度和颜色信息进行体渲染,得到所述物体对象的与所述预期视角信息对应的渲染图像。

4、第三方面,本公开提供了一种电子设备,该电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的一个或多个计算机程序,一个或多个所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述的图像处理方法。

5、第四方面,本公开提供了一种计算机可读存储介质,其上存储有计算机程序,其中,所述计算机程序在被处理器/处理核执行时实现上述的图像处理方法。

6、本公开所提供的实施例,对于获取的物体对象的具有不同视角的多个图像,可以通过三维空间采样,得到所述物体对象所在的目标三维空间的多个第一空间采样点,并在分别确定多个第一空间采样点在所述目标三维空间中的空间位置信息和针对所述物体对象的视角信息之后,利用预训练的信息预测模型,对待生成的预期视角信息和所述多个第一空间采样点的空间位置信息和视角信息进行处理,得到与所述预期视角信息对应的多个第二空间采样点的体积密度和颜色信息,并对所述多个第二空间采样点的体积密度和颜色信息进行体渲染,即可得到所述物体对象的与所述预期视角信息对应的渲染图像;在该方法中,可以根据物体对象的具有不同视角图像,生成与预期视角信息对应的渲染图像,处理过程中无需对大量参数进行计算,从而提高处理效率。

7、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

本文档来自技高网...

【技术保护点】

1.一种图像处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述多个图像分别进行三维空间采样,得到所述物体对象所在的目标三维空间的多个第一空间采样点,包括:

3.根据权利要求2所述的方法,其特征在于,所述空间采样面为半球面;所述根据所述重心位置,构建与所述第i个图像对应的多个空间采样面,并在每个空间采样面上进行采样,得到与所述第i个图像对应的空间采样面上的多个空间采样点,包括:

4.根据权利要求3所述的方法,其特征在于,所述分别确定所述多个第一空间采样点在所述目标三维空间中的空间位置信息和针对所述物体对象的视角信息,包括:

5.根据权利要求2所述的方法,其特征在于,所述空间采样面为圆柱体表面;所述根据所述重心位置,构建与所述第i个图像对应的多个空间采样面,并在每个空间采样面上进行采样,得到与所述第i个图像对应的空间采样面上的多个空间采样点,包括:

6.根据权利要求5所述的方法,其特征在于,所述分别确定所述多个第一空间采样点在所述目标三维空间中的空间位置信息和针对所述物体对象的视角信息,包括:

7.根据权利要求1所述的方法,其特征在于,所述图像数据集中包括训练图像子集,所述训练图像子集中包括具有不同视角的多个训练图像,所述多个训练图像用于训练信息预测模型;在利用预训练的信息预测模型,对待生成的预期视角信息和所述多个第一空间采样点的空间位置信息和视角信息进行处理之前,所述方法还包括:

8.根据权利要求1所述的方法,其特征在于,

9.根据权利要求1所述的方法,其特征在于,所述对所述多个第二空间采样点的体积密度和颜色信息进行体渲染,得到所述物体对象的与所述预期视角信息对应的渲染图像,包括:

10.根据权利要求1所述的方法,其特征在于,在得到所述物体对象的与所述预期视角信息对应的渲染图像之后,所述方法还包括:

11.一种图像处理装置,其特征在于,包括:

12.一种电子设备,其特征在于,包括:

13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序在被处理器执行时实现如权利要求1-10中任一项所述的图像处理方法。

...

【技术特征摘要】

1.一种图像处理方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述多个图像分别进行三维空间采样,得到所述物体对象所在的目标三维空间的多个第一空间采样点,包括:

3.根据权利要求2所述的方法,其特征在于,所述空间采样面为半球面;所述根据所述重心位置,构建与所述第i个图像对应的多个空间采样面,并在每个空间采样面上进行采样,得到与所述第i个图像对应的空间采样面上的多个空间采样点,包括:

4.根据权利要求3所述的方法,其特征在于,所述分别确定所述多个第一空间采样点在所述目标三维空间中的空间位置信息和针对所述物体对象的视角信息,包括:

5.根据权利要求2所述的方法,其特征在于,所述空间采样面为圆柱体表面;所述根据所述重心位置,构建与所述第i个图像对应的多个空间采样面,并在每个空间采样面上进行采样,得到与所述第i个图像对应的空间采样面上的多个空间采样点,包括:

6.根据权利要求5所述的方法,其特征在于,所述分别确定所述多个第一空间采样点在所述目标三维空间中的空间位置信息和针对...

【专利技术属性】
技术研发人员:罗华刚刘海涛于皓张杰付淳川
申请(专利权)人:北京中关村科金技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1