用于在渲染图像中使用的可重新照明纹理制造技术

本公开的实施例涉及用于在渲染图像中使用的可重新照明纹理。可重新照明的自由视点渲染允许基于来自多个照相机视点的场景的多视图的场景的新视图被渲染和重新照明。可将来自多个照相机视点的图像值分离成漫射图像分量和镜面反射图像分量，使得通过使用分离的漫反射图像分量可以确定镜面反射场景的可重新照明纹理的本征颜色分量。而且，通过基于初始表面法线场的保守分量构建高度映射，然后基于所构建的高度映射确定细化的表面法线，可以对场景中几何的表面法线进行细化。

【技术实现步骤摘要】
用于在渲染图像中使用的可重新照明纹理本申请是申请号为201510484716.8、申请日为2015年8月7日、专利技术名称为“用于在渲染图像中使用的可重新照明纹理”的专利技术专利申请的分案申请。
本公开涉及用于在渲染图像中使用的可重新照明纹理。
技术介绍
可以从照相机的视点捕捉场景的图像。在一些情况下，可以有捕捉场景的不同图像的一个以上的照相机。场景的每一个图像表示来自相应的照相机的视点的场景的视图。但是，将存在场景的一些视点会不对应照相机视点的任何一个。图像可以是一帧视频序列。诸如自由视点视频渲染(FVVR)的技术允许基于来自多个照相机视点的场景的一组多个视图生成表示场景的新视图的图像。优选校准照相机且彼此同步以促进推断场景的中间图像。基于场景的不同图像，例如使用多视图立体(MVS)可构建场景几何的模型，并且可形成可以应用于该模型的纹理(texture)。该纹理可以通过投射地使具有原始图像的场景几何纹理化并混合所投射的图像而形成。然后具有该纹理的模型可用于从可以与照相机视点之一相同或不同的渲染视点来渲染场景。除从渲染视点重新构本文档来自技高网...

【技术保护点】
1.一种确定针对图像处理系统中的场景的局部辐照估计的方法，所述方法包括：/n获得针对所述场景中的一个或多个表面上的样本位置的初始辐照估计，所述初始辐照估计是基于针对所述场景的全局辐照估计的；/n获得指示所述场景中依赖于视角的所述样本位置的可见性的可见性指示；/n使用所获得的所述初始辐照估计和所获得的所述可见性指示，来计算针对所述场景的角度依赖性辐射估计；以及/n使用所述辐射估计和所述可见性指示，以确定所述样本位置处的局部辐照估计。/n

【技术特征摘要】
20140808 GB 1414144.4;20141013 GB 1418090.5;2014101.一种确定针对图像处理系统中的场景的局部辐照估计的方法，所述方法包括：
获得针对所述场景中的一个或多个表面上的样本位置的初始辐照估计，所述初始辐照估计是基于针对所述场景的全局辐照估计的；
获得指示所述场景中依赖于视角的所述样本位置的可见性的可见性指示；
使用所获得的所述初始辐照估计和所获得的所述可见性指示，来计算针对所述场景的角度依赖性辐射估计；以及
使用所述辐射估计和所述可见性指示，以确定所述样本位置处的局部辐照估计。


2.根据权利要求1所述的方法，还包括：使用所述局部辐照估计来确定针对纹理的本征颜色估计。


3.根据权利要求1或2所述的方法，其中所述全局辐照估计依赖于表面法线，并且其中获得针对所述场景中的一个或多个表面上的样本位置的初始辐照估计包括：使用所述样本位置的表面法线，通过对所述全局辐照估计进行采样来确定所述初始辐照估计。


4.根据权利要求1或2所述的方法，其中针对所述场景的所述全局辐照估计可以通过以下而被确定：
分析所述场景的至少一个视图，以估计描述所述场景中的所述一个或多个表面的场景几何，并且将初始纹理分段成多种材料，所述初始纹理可被分离成本征颜色估计和对应的阴影估计；
确定针对所述材料中的每种材料的初始粗糙本征颜色估计；
确定一个或多个缩放因子，用于缩放所述初始粗糙本征颜色估计中的相应的一个或多个初始粗糙本征颜色估计，所述缩放因子是基于材料辐照估计之间的差异而被确定的，所述材料辐照估计针对所述材料、基于与所述材料的所述初始粗糙本征颜色估计的缩放版对应的阴影估计而被确定；以及
使用所确定的所述缩放因子来确定所述全局辐照估计作为表面法线的函数。


5.根据权利要求4所述的方法，其中针对所述材料中的每种材料，所述初始粗糙本征颜色估计通过找到针对所述材料的所述初始纹理中的值的平均值而被确定。


6.根据权利要求4所述方法，其中使用所确定的所述缩放因子来确定所述全局辐照估计包括：
使用所确定的所述缩放因子，来缩放所述初始粗糙本征颜色估计中的所述一个或多个初始粗糙本征颜色估计；以及
使用缩放的所述粗糙本征颜色估计以确定所述全局辐照估计作为表面法线的函数。


7.根据权利要求6所述方法，其中使用缩放的所述粗糙本征颜色估计以确定所述全局辐照估计包括：
组合缩放的所述粗糙本征颜色估计，以形成全局粗糙本征颜色估计；以及
使用所述全局粗糙本征颜色估计以确定所述全局辐照估计作为表面法线的函数。


8.根据权利要求7所述的方法，还包括：将二阶球谐函数拟合到所述全局辐照估计，从而对所述全局辐照估计进行去噪。


9.根据权利要求4所述的方法，其中确定一个或多个缩放因子包括：
确定针对所述材料辐照估计的重叠区域中的不同材料的材料辐照估计之间的所述差异的测量，所述差异的所述测量依赖于所述缩放因子，其中对于特定缩放因子，针对材料的所述材料辐照估计匹配于与用所述特定缩放因子缩放的所述初始粗糙本征颜色估计的版本对应的所述阴影估计；以及
确定所述缩放因子以便最小化所述差异的所述测量。


10.根据权利要求1或2所述的方法，其中获得可见性指示包括：
基于通过分析所述场景的至少一个视图而确定的、描述所述场景中的所述一个或多个表面的所估计的场景几何，来确定所述可见性指示。


11.根据权利要求1或2所述的方法，其中所述可见性指示是针对...

【专利技术属性】
技术研发人员：J·伊姆伯，A·希尔顿，JY·吉耶莫特，
申请(专利权)人：想象技术有限公司，
类型：发明
国别省市：英国;GB