System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像处理方法、装置、电子设备及存储介质制造方法及图纸_技高网

图像处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:40001609 阅读:10 留言:0更新日期:2024-01-09 03:46
本公开提供了一种图像处理方法、装置、电子设备及存储介质,属于计算机技术领域。方法包括:在第i轮迭代过程中,基于第一差异信息,对第一纹理信息进行更新,得到第二纹理信息;基于第二纹理信息,生成对象网格模型的第二渲染图像;对第二渲染图像进行优化,得到对象网格模型的第二优化图像;响应于第二差异信息不满足迭代结束条件,执行第i+1轮迭代过程;响应于第二差异信息满足迭代结束条件,基于第二纹理信息,生成对象网格模型的纹理图像。上述方案能够通过多轮迭代的方式对纹理进行更新,实现了将渲染图像中像素值的优化反反向传播到对纹理的优化,从而提高纹理的精细度,优化纹理的细节。

【技术实现步骤摘要】

本公开涉及计算机,特别涉及一种图像处理方法、装置、电子设备及存储介质


技术介绍

1、在计算机图形学领域,通常采用渲染引擎对网格模型及其纹理进行渲染,得到渲染图像。其中,纹理是上述渲染过程中的关键,纹理能够决定渲染图像是否具有真实的视觉效果,或者是否能够准确表示虚拟场景。因此,如何生成网格模型的纹理,以提高渲染图像的视觉效果,是一个需要解决的技术问题。

2、相关技术中,通常由设计师通过绘图、拍照、编辑图像等方式,手动设计网格模型的纹理,并将设计的纹理映射到网格模型的各个面上,从而生成网格模型的纹理。

3、但是,采用上述方法,需要设计师手动设计纹理,并优化纹理的细节。因此,在渲染图像的视觉效果较差时,需要设计师多次手动优化纹理的细节,导致生成纹理的操作较多,生成纹理的效率较低。


技术实现思路

1、本公开提供一种图像处理方法、装置、电子设备及存储介质,能够提高纹理图像的精细度,优化纹理图像的细节,从而使得根据纹理图像能够渲染出视觉效果更好的渲染图像。本公开的技术方案如下:

2、根据本公开实施例的一方面,提供一种图像处理方法,包括:

3、在第i轮迭代过程中,基于第一差异信息,对第一纹理信息进行更新,得到第二纹理信息,所述第一差异信息用于表示第i-1轮迭代过程中对象网格模型的第一渲染图像和所述对象网格模型的第一优化图像之间的差异,所述第一纹理信息为所述第i-1轮迭代过程中更新后的纹理信息,所述第一渲染图像基于所述第一纹理信息对所述对象网格模型进行渲染得到,所述第一优化图像通过对所述第一渲染图像进行优化得到,所述第一纹理信息包括所述第i-1轮迭代后所述对象网格模型关联的纹理点的纹理值,i为大于1的整数;

4、基于所述第二纹理信息,生成所述对象网格模型的第二渲染图像;

5、对所述第二渲染图像进行优化,得到所述对象网格模型的第二优化图像;

6、响应于第二差异信息不满足迭代结束条件,执行第i+1轮迭代过程,所述第二差异信息用于表示所述第二渲染图像和所述第二优化图像之间的差异;

7、响应于所述第二差异信息满足所述迭代结束条件,基于所述第二纹理信息,生成所述对象网格模型的纹理图像,所述纹理图像中纹理点的像素值为所述第二纹理信息中所述纹理点的纹理值。

8、在一些实施例中,所述在第i轮迭代过程中,基于第一差异信息,对第一纹理信息进行更新,得到第二纹理信息,包括:

9、在所述第i轮迭代过程中,基于所述第一差异信息,确定更新步长,所述更新步长用于表示所述第一纹理信息中纹理点的纹理值的更新幅度,所述更新步长与所述第一差异信息所表示的差异的大小正相关;

10、基于所述更新步长,对所述第一纹理信息进行更新,得到所述第二纹理信息。

11、在一些实施例中,所述第一渲染图像中的多个第一像素点与所述第一优化图像中的多个第二像素点一一对应,对于所述第一渲染图像中的任一第一像素点,所述第一像素点的像素值为所述第一纹理信息中与所述第一像素点对应的纹理点的纹理值;

12、所述在所述第i轮迭代过程中,基于所述第一差异信息,确定更新步长,包括:

13、在所述第i轮迭代过程中,对于所述第一渲染图像中的任一第一像素点,将渲染函数在目标位置处的梯度确定为所述第一像素点的梯度,所述渲染函数用于将纹理点的纹理值渲染为像素点的像素值,所述目标位置为所述第一像素点的像素值在所述渲染函数的函数曲线上的位置;

14、基于所述第一差异信息中所述第一像素点和与所述第一像素点对应的第二像素点之间像素值大小的差异,确定所述第一像素点的更新步长,所述第一像素点的更新步长与所述差异的大小正相关;

15、将所述第一像素点的梯度与所述第一像素点的更新步长相乘,得到所述第一像素点所对应的纹理点的更新步长。

16、在一些实施例中,所述方法还包括:

17、确定虚拟场景中的多个观察位置和每个观察位置的观察矩阵,所述观察矩阵用于指示将所述对象网格模型从世界空间转换至观察空间,所述世界空间为所述虚拟场景在世界坐标系下的空间,所述观察空间为所述虚拟场景在以所述观察位置为原点的坐标系下的空间;

18、在第一轮迭代过程中,基于所述每个观察位置的观察矩阵和所述对象网格模型的初始纹理信息,分别生成所述对象网格模型在每个观察空间下的第三渲染图像,所述观察矩阵与所述观察空间一一对应;

19、确定第三差异信息,所述第三差异信息用于表示所述第三渲染图像和第三优化图像之间的差异,所述第三优化图像通过对所述第三渲染图像进行优化得到。

20、在一些实施例中,所述初始纹理信息还包括初始纹理图像和所述对象网格模型的顶点的第一坐标,所述初始纹理图像中包括所述对象网格模型关联的多个纹理点,所述初始纹理图像中纹理点的像素值为纹理点的纹理值,所述第一坐标为所述顶点在所述世界坐标系下的坐标;

21、所述在第一轮迭代的过程中,基于所述每个观察位置的观察矩阵和所述对象网格模型的初始纹理信息,分别生成所述对象网格模型在每个观察空间下的第三渲染图像,包括:

22、在所述第一轮迭代过程中,对于任一观察矩阵,基于所述观察矩阵,对所述初始纹理信息中所述对象网格模型的顶点的第一坐标进行变换,得到所述顶点的第二坐标,所述第二坐标为所述顶点在所述观察矩阵对应的观察空间下的坐标;

23、将所述顶点的第二坐标映射为二维坐标,所述二维坐标用于表示所述顶点对应的纹理点的坐标;

24、对所述对象网格模型的顶点的二维坐标进行插值,得到所述对象网格模型上除顶点外的其他点的二维坐标;

25、对于所述对象网格模型上任一点的二维坐标,在所述初始纹理信息中的纹理图像中确定所述二维坐标对应的纹理点和所述纹理点的纹理值;

26、基于所述对象网格模型上多个点对应的纹理值,对所述对象网格模型进行渲染,得到所述对象网格模型的第三渲染图像,所述第三渲染图像为所述对象网格模型在所述观察空间下的渲染图像,所述第三渲染图像中像素点的像素值为所述像素点对应的纹理点的纹理值,所述像素点对应的纹理点为所述对象网格模型上与所述像素点关联的点所对应的纹理点。

27、在一些实施例中,所述方法还包括:

28、在所述第i轮迭代过程中,对于任一观察矩阵,基于所述观察矩阵和所述第一纹理信息,对所述对象网格模型进行渲染,得到所述对象网格模型的第四渲染图像,所述第四渲染图像为所述对象网格模型在所述观察矩阵对应的观察空间下的渲染图像,所述第四渲染图像中像素点的像素值的三个色彩分量分别为所述像素点在所述观察空间下对应的纹理点的二维纹理坐标和所述纹理点所在纹理图像的标识,所述像素点对应的纹理点为所述对象网格模型中与所述像素点相关联的点所对应的纹理点;

29、在所述第i轮迭代过程中,基于所述第四渲染图像,确定所述对象网格模型上的点、所述第四渲染图像中的像素点以及所述第二纹理信息中的本文档来自技高网...

【技术保护点】

1.一种图像处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的图像处理方法,其特征在于,所述在第i轮迭代过程中,基于第一差异信息,对第一纹理信息进行更新,得到第二纹理信息,包括:

3.根据权利要求2所述的图像处理方法,其特征在于,所述第一渲染图像中的多个第一像素点与所述第一优化图像中的多个第二像素点一一对应,对于所述第一渲染图像中的任一第一像素点,所述第一像素点的像素值为所述第一纹理信息中与所述第一像素点对应的纹理点的纹理值;

4.根据权利要求1所述的图像处理方法,其特征在于,所述方法还包括:

5.根据权利要求4所述的图像处理方法,其特征在于,所述初始纹理信息还包括初始纹理图像和所述对象网格模型的顶点的第一坐标,所述初始纹理图像中包括所述对象网格模型关联的多个纹理点,所述初始纹理图像中纹理点的像素值为纹理点的纹理值,所述第一坐标为所述顶点在所述世界坐标系下的坐标;

6.根据权利要求4所述的图像处理方法,其特征在于,所述方法还包括:

7.根据权利要求6所述的图像处理方法,其特征在于,所述生成所述对象网格模型在所述观察空间下的第二渲染图像的过程包括:

8.根据权利要求7所述的图像处理方法,其特征在于,所述初始纹理信息包括多个初始纹理图像;

9.根据权利要求8所述的图像处理方法,其特征在于,所述方法还包括:

10.根据权利要求9所述的图像处理方法,其特征在于,所述方法还包括:

11.根据权利要求1所述的图像处理方法,其特征在于,所述第一渲染图像中的多个第一像素点与所述第一优化图像中的多个第二像素点一一对应;

12.一种图像处理装置,其特征在于,所述装置包括:

13.一种电子设备,其特征在于,所述电子设备包括:

14.一种计算机可读存储介质,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1至11任一项所述的图像处理方法。

...

【技术特征摘要】

1.一种图像处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的图像处理方法,其特征在于,所述在第i轮迭代过程中,基于第一差异信息,对第一纹理信息进行更新,得到第二纹理信息,包括:

3.根据权利要求2所述的图像处理方法,其特征在于,所述第一渲染图像中的多个第一像素点与所述第一优化图像中的多个第二像素点一一对应,对于所述第一渲染图像中的任一第一像素点,所述第一像素点的像素值为所述第一纹理信息中与所述第一像素点对应的纹理点的纹理值;

4.根据权利要求1所述的图像处理方法,其特征在于,所述方法还包括:

5.根据权利要求4所述的图像处理方法,其特征在于,所述初始纹理信息还包括初始纹理图像和所述对象网格模型的顶点的第一坐标,所述初始纹理图像中包括所述对象网格模型关联的多个纹理点,所述初始纹理图像中纹理点的像素值为纹理点的纹理值,所述第一坐标为所述顶点在所述世界坐标系下的坐标;

6.根据权利要求4所述的图像处理方...

【专利技术属性】
技术研发人员:施侃乐李雅子郑屹
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1