光照方向确定方法、装置、电子设备及存储介质制造方法及图纸

本公开关于光照方向确定方法、装置、电子设备及存储介质，所述方法包括：通过多个下采样神经网络依次对待处理图像进行下采样，得到待转换图像；通过通道转换神经网络对待转换图像进行通道转换，得到转换后图像；对转换后图像进行矩阵变换，得到目标图像；根据目标图像中像素的亮度在目标图像中确定光源对应的光源像素；根据每个光源像素指向目标图像中心的向量，计算待处理图像中光源的光照方向。根据本公开，将待处理图像的特征表达在目标图像中，实现通过目标图像准确地对待处理图像光照的特征进行表达，进而根据目标直接准确地确定待处理图像中的光照方向，所应用模型简单，计算速度快，适用于在手机等计算能力不强的设备上使用。上使用。上使用。

【技术实现步骤摘要】
光照方向确定方法、装置、电子设备及存储介质


[0001]本公开涉及图像处理领域，尤其涉及光照方向确定方法、装置、电子设备及存储介质。

技术介绍

[0002]在虚拟现实和增强现实等领域，为了在生成的虚拟物体上呈现与环境相同的光照效果，需要先计算环境中光源的光照方向。
[0003]目前的计算光照方向的方式，计算的结果并非光照方向，而是球谐系数，渲染过程相对直接得到光照方向较为复杂，并且得到的球谐系数用于表征光照方向，准确率也不是很高。

技术实现思路

[0004]本公开提供了光照方向确定方法、装置、电子设备及存储介质，以至少解决相关技术中的技术问题。本公开的技术方案如下：
[0005]根据本公开实施例的第一方面，提出一种光照方向确定方法，包括：
[0006]通过多个下采样神经网络依次对待处理图像进行下采样，以得到待转换图像，其中，每个所述下采样神经网络输出图像的通道数，为所述下采样神经网络输入图像的通道数的n倍，所述待转换图像宽度上和高度上像素的数目为1，n为大于1的整数；
[0007]通过通道转换神经本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种光照方向确定方法，其特征在于，包括：通过多个下采样神经网络依次对待处理图像进行下采样，以得到待转换图像，其中，每个所述下采样神经网络输出图像的通道数，为所述下采样神经网络输入图像的通道数的n倍，所述待转换图像宽度上和高度上像素的数目为1，n为大于1的整数；通过通道转换神经网络对所述待转换图像进行通道转换，以得到转换后图像，其中，所述转换后图像的像素总数为目标数目，所述目标数目为预设通道数和预设宽度以及预设高度之积；对所述转换后图像进行矩阵变换，以得到目标图像，其中，所述目标图像的通道数、宽度方向上像素的数目和高度方向上像素的数目分别为所述预设通道数、所述预设宽度和所述预设高度；根据所述目标图像中像素的亮度在所述目标图像中确定光源对应的光源像素；根据每个所述光源像素指向所述目标图像中心的向量，计算所述待处理图像中光源的光照方向。2.根据权利要求1所述的方法，其特征在于，所述根据所述目标图像中像素的亮度在所述目标图像中确定光源像素包括：在所述目标图像中确定最大亮度的像素；在所述目标图像中确定亮度与所述最大亮度的比值大于预设比值的像素为所述光源像素。3.根据权利要求1所述的方法，其特征在于，所述根据所述目标图像中像素的亮度在所述目标图像中确定光源像素包括：在所述目标图像中确定亮度大于或等于预设亮度的像素为所述光源像素。4.根据权利要求1所述的方法，其特征在于，所述根据每个所述光源像素指向所述目标图像中心的向量，计算所述待处理图像中光源的光照方向包括：将每个所述向量相加得到和向量，将所述和向量的方向作为所述光照方向。5.根据权利要求1所述的方法，其特征在于，所述根据每个所述光源像素指向所述目标图像中心的向量，计算所述待处理图像中光源的光照方向包括：对每个所述向量进行加权求和，得到求和向量的方向作为所述光照方向，其中，所述向量的权重与所述向量对应的光源像素的亮度正相关。6.根据权利要求1至5中任一项所述的方法，其特征在于，在通过多个下采样神经网络依次对待处理图像进行下采样之前，所述方法还包括：在初始图像的高度...

【专利技术属性】
技术研发人员：郝燕龙，张渊，郑文，
申请(专利权)人：北京达佳互联信息技术有限公司，
类型：发明
国别省市：