人脸图像的光照处理方法和装置制造方法及图纸

本发明专利技术提供了人脸图像的光照处理方法和装置，该方法包括：通过对获取的人脸图像进行检测，确定人脸图像中的第一面部区域；然后将获取的场景光照参数对第一面部区域进行渲染，得到光照编辑的第二面部区域；根据第二面部区域与第一面部区域，确定第一面部区域内每个像素对应的颜色变换参数；以及，根据第一面部区域内的像素对应的颜色变换参数确定人脸图像中第一面部区域外的像素对应的颜色变换参数，并对人脸图像进行颜色变换，从而得到光照编辑的人脸图像。这样就可以得到不同光照的人脸图像。

【技术实现步骤摘要】
人脸图像的光照处理方法和装置
本专利技术涉及图像处理
，尤其是涉及人脸图像的光照处理方法和装置。
技术介绍
人脸图像作为图像数据的一种，目前被广泛使用在计算机视觉、人工智能等领域，是诸如人脸检测与识别、人脸属性检测和人脸关键点检测的重要训练数据。在人工智能领域中对在光照环境较差的场景中采集的人脸图像进行人脸检测与识别一直面临着准确率差的问题，为了提高在光照环境较差的场景中人脸检测与识别的准确率，需要获取大量在光照环境较差的场景中采集的人脸图像作为样本对神经网络进行训练。但是，很难批量采集在光照环境较差的场景中人脸图像(例如逆光、侧光或阴阳脸等)。
技术实现思路
有鉴于此，本专利技术的目的在于提供人脸图像的光照处理方法和装置，可以获取不同光照的人脸图像。第一方面，本专利技术实施例提供了人脸图像的光照处理方法，所述方法包括：获取人脸图像，并对所述人脸图像进行检测，确定所述人脸图像中的第一面部区域；获取场景光照参数；根据所述场景光照参数对所述第一面部区域进行渲染，得到光照编辑的第二面部区域；根据所述第二面部区域与所述第一面部区域，确定所述第一面部区域内每个像素对应的颜色变换参数；根据所述第一面部区域内每个像素对应的颜色变换参数，确定所述图像中所述第一面部区域外的每个像素对应的颜色变换参数；根据所述第一面部区域内每个像素对应的颜色变换参数和所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数对所述人脸图像进行颜色变换，得到光照编辑的人脸图像。进一步的，所述根据所述场景光照参数对所述第一面部区域进行渲染，得到光照编辑的第二面部区域，包括：确定所述第一面部区域的特征参数，所述特征参数包括人脸三维信息和人脸材质信息中的至少一种；根据所述特征参数和所述场景光照参数，对所述第一面部区域进行渲染，得到所述第二面部区域。进一步的，所述确定所述第一面部区域的特征参数，包括：将所述第一面部区域输入人脸关键点检测模型，得到人脸关键点位置信息；将所述第一面部区域和所述人脸关键点位置信息输入三维人脸识别模型，得到所述人脸三维信息。进一步的，所述确定所述第一面部区域的特征参数，包括：获取所述第一面部区域的人脸三维信息；将所述人脸三维信息和所述第一面部区域输入场景光照检测模型，得到所述人脸图像的场景光照参数和所述人脸材质信息。进一步的，所述根据所述第一面部区域内每个像素对应的颜色变换参数，确定所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数，包括：将所述第一面部区域内的像素对应的颜色变换参数平滑扩散至所述人脸图像中所述第一面部区域外的像素，使得位于所述第一面部区域边界两侧的任意相邻像素的颜色变换参数的差值最小化，且所述人脸图像中所述第一面部区域外的任意相邻像素的颜色变换参数的差值最小化，确定所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数。第二方面，本专利技术实施例提供了人脸图像的光照处理装置，所述装置包括：检测模块，用于获取人脸图像，并对所述人脸图像进行检测，确定所述人脸图像中的第一面部区域；获取模块，用于获取场景光照参数；渲染模块，用于根据所述场景光照参数对所述第一面部区域进行渲染，得到光照编辑的第二面部区域；第一确定模块，用于根据所述第二面部区域与所述第一面部区域，确定所述第一面部区域内每个像素对应的颜色变换参数；第二确定模块，用于根据所述第一面部区域内每个像素对应的颜色变换参数，确定所述图像中所述第一面部区域外的每个像素对应的颜色变换参数；颜色变换模块，用于根据所述第一面部区域内每个像素对应的颜色变换参数和所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数对所述人脸图像进行颜色变换，得到光照编辑的人脸图像。进一步的，所述渲染模块具体用于：确定所述第一面部区域的特征参数，所述特征参数包括人脸三维信息和人脸材质信息中的至少一种；根据所述特征参数和所述场景光照参数，对所述第一面部区域进行渲染，得到所述第二面部区域。进一步的，所述渲染模块具体用于：将所述第一面部区域输入人脸关键点检测模型，得到人脸关键点位置信息；将所述第一面部区域和所述人脸关键点位置信息输入三维人脸识别模型，得到所述人脸三维信息。进一步的，所述渲染模块具体用于：获取所述第一面部区域的人脸三维信息；将所述人脸三维信息和所述第一面部区域输入场景光照检测模型，得到所述人脸图像的场景光照参数和所述人脸材质信息。进一步的，所述第二确定模块具体用于：将所述第一面部区域内的像素对应的颜色变换参数平滑扩散至所述人脸图像中所述第一面部区域外的像素，使得位于所述第一面部区域边界两侧的任意相邻像素的颜色变换参数的差值最小化，且所述人脸图像中所述第一面部区域外的任意相邻像素的颜色变换参数的差值最小化，确定所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数。第三方面，本专利技术实施例还提供电子设备，包括存储器和处理器，所述存储器中存储有可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的人脸图像的光照处理方法的步骤。第四方面，本专利技术实施例还提供计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行上述的人脸图像的光照处理方法的步骤。本专利技术实施例提供的人脸图像的光照处理方法和装置，能够得到不同光照的人脸图像，而无需在各种实际的光照环境场景中采集图像，进而节省了采集图像的成本。本专利技术的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。为使本专利技术的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。附图说明为了更清楚地说明本专利技术具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术实施例一提供的电子设备的示意图；图2为本专利技术实施例二提供的人脸图像的光照处理方法流程图；图3为本专利技术实施例二提供的人脸图像的光照处理方法中步骤S103的流程图；图4为本专利技术实施例三提供的人脸图像的光照处理装置示意图。图标：10-检测模块；20-获取模块；30-渲染模块；40-第一确定模块；50-第二确定模块；60-颜色变换模块；100-电子设备；102-处理器；104-存储装置；106-输入装置；108-输出装置；110-图像采集装置；112-总线系统。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合附图对本专利技术的技术方案进行描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。为便于对本实施例进行理解，下面对本专利技术实施例进行详细介绍。实施例一：图1是本专利技术实施例一提供的电子设备的示意图。参照图1，用于实现本专利技术实施例的人脸图像的光照处理方法和装置的示例电子设备100，包括一个或多个处理器102以及一个或多个本文档来自技高网...

【技术保护点】
一种人脸图像的光照处理方法，其特征在于，所述方法包括：获取人脸图像，并对所述人脸图像进行检测，确定所述人脸图像中的第一面部区域；获取场景光照参数；根据所述场景光照参数对所述第一面部区域进行渲染，得到光照编辑的第二面部区域；根据所述第二面部区域与所述第一面部区域，确定所述第一面部区域内每个像素对应的颜色变换参数；根据所述第一面部区域内每个像素对应的颜色变换参数，确定所述图像中所述第一面部区域外的每个像素对应的颜色变换参数；根据所述第一面部区域内每个像素对应的颜色变换参数和所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数对所述人脸图像进行颜色变换，得到光照编辑的人脸图像。

【技术特征摘要】
1.一种人脸图像的光照处理方法，其特征在于，所述方法包括：获取人脸图像，并对所述人脸图像进行检测，确定所述人脸图像中的第一面部区域；获取场景光照参数；根据所述场景光照参数对所述第一面部区域进行渲染，得到光照编辑的第二面部区域；根据所述第二面部区域与所述第一面部区域，确定所述第一面部区域内每个像素对应的颜色变换参数；根据所述第一面部区域内每个像素对应的颜色变换参数，确定所述图像中所述第一面部区域外的每个像素对应的颜色变换参数；根据所述第一面部区域内每个像素对应的颜色变换参数和所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数对所述人脸图像进行颜色变换，得到光照编辑的人脸图像。2.根据权利要求1所述的人脸图像的光照处理方法，其特征在于，所述根据所述场景光照参数对所述第一面部区域进行渲染，得到光照编辑的第二面部区域，包括：确定所述第一面部区域的特征参数，所述特征参数包括人脸三维信息和人脸材质信息中的至少一种；根据所述特征参数和所述场景光照参数，对所述第一面部区域进行渲染，得到所述第二面部区域。3.根据权利要求2所述的人脸图像的光照处理方法，其特征在于，所述确定所述第一面部区域的特征参数，包括：将所述第一面部区域输入人脸关键点检测模型，得到人脸关键点位置信息；将所述第一面部区域和所述人脸关键点位置信息输入三维人脸识别模型，得到所述人脸三维信息。4.根据权利要求2所述的人脸图像的光照处理方法，其特征在于，所述确定所述第一面部区域的特征参数，包括：获取所述第一面部区域的人脸三维信息；将所述人脸三维信息和所述第一面部区域输入场景光照检测模型，得到所述人脸图像的场景光照参数和所述人脸材质信息。5.根据权利要求1至4中任一项所述的人脸图像的光照处理方法，其特征在于，所述根据所述第一面部区域内每个像素对应的颜色变换参数，确定所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数，包括：将所述第一面部区域内的像素对应的颜色变换参数平滑扩散至所述人脸图像中所述第一面部区域外的像素，使得位于所述第一面部区域边界两侧的任意相邻像素的颜色变换参数的差值最小化，且所述人脸图像中所述第一面部区域外的任意相邻像素的颜色变换参数的差值最小化，确定所述人脸图像中所述第一面部区域外的每个像素对应的颜色变换参数。6.一种人脸图像的光照处理装置，其特征在于，所述装置包括：检测模块，用于获取人脸图像，并对所述人脸图像进行检测，确定所...

【专利技术属性】
技术研发人员：马里千，
申请(专利权)人：北京旷视科技有限公司，北京迈格威科技有限公司，
类型：发明
国别省市：北京,11