图像处理方法、装置、电子设备及存储介质制造方法及图纸

本公开实施例提供的图像处理方法、装置、电子设备及存储介质，获取待处理的人脸图像；将所述人脸图像输入至训练完毕的图像处理网络，输出人脸图像对应的高光图像数据、非高光图像数据以及纹理坐标数据；根据所述高光图像数据和所述非高光图像数据，确定高光绘制数据以及非高光绘制数据；将所述纹理坐标数据、高光绘制数据以及非高光绘制数据进行叠加处理，得到处理后的人脸图像。本实施例提供的图像处理方法，能够对人脸图像的高光部分和非高光部分分别进行处理，对人脸图像进行还原和绘制，能够避免人脸图像的失真问题，提高人脸图像的显示效果。显示效果。显示效果。

【技术实现步骤摘要】
图像处理方法、装置、电子设备及存储介质


[0001]本公开实施例涉及计算机领域，尤其涉及一种图像处理方法、装置、电 子设备及存储介质。

技术介绍

[0002]对于图像进行不同的光效渲染处理将影响着图像作品的视觉效果。
[0003]光源重建是光效渲染处理的一种常用技术，通过利用对GAN网络以对 光源的光照参数进行模拟。然后，利用模拟的光照参数对图像进行环境光 照的绘制，得到在该光源下的处理后的图像。
[0004]但是，现有的GAN网络仅能对于低频光源的进行渲染处理，当需要对 高频光源进行渲染处理时，其渲染效果不佳，容易出现图像失真的问题。

技术实现思路

[0005]针对上述问题，本公开实施例提供了一种图像处理方法、装置、电子设 备及存储介质。
[0006]第一方面，本公开实施例提供一种图像处理方法，包括：
[0007]获取待处理的人脸图像；
[0008]将所述人脸图像输入至训练完毕的图像处理网络，输出人脸图像对应的 高光图像数据、非高光图像数据以及纹理坐标数据；
[0009]根据所述高光图像数据和所述非高光图像数据，确定高光绘制数据以及 非高光绘制数据；
[0010]将所述纹理坐标数据、高光绘制数据以及非高光绘制数据进行叠加处理， 得到处理后的人脸图像。
[0011]第二方面，本公开实施例提供一种图像处理装置，包括:
[0012]通信模块，用于获取待处理的人脸图像；
[0013]光效处理模块，用于将所述人脸图像输入至训练完毕的图像处理网络， 输出人脸图像对应的高光图像数据、非高光图像数据以及纹理坐标数据；根 据所述高光图像数据和所述非高光图像数据，确定高光绘制数据以及非高光 绘制数据；
[0014]叠加处理模块，用于将所述纹理坐标数据、高光绘制数据以及非高光绘 制数据进行叠加处理，得到处理后的人脸图像。
[0015]第三方面，本公开实施例提供一种电子设备，包括：至少一个处理器； 以及
[0016]存储器；
[0017]所述存储器存储计算机执行指令；
[0018]所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述 至少一个处理器执行如第一方面任一项所述的图像处理方法。
[0019]第四方面，本公开实施例提供一种计算机可读存储介质，所述计算机可 读存储介
质中存储有计算机执行指令，当处理器执行所述计算机执行指令时， 实现如上第一方面以及第一方面各种可能的设计所述的图像处理方法。
[0020]本公开实施例提供的图像处理方法、装置、电子设备及存储介质，获取 待处理的人脸图像；将所述人脸图像输入至训练完毕的图像处理网络，输出 人脸图像对应的高光图像数据、非高光图像数据以及纹理坐标数据；根据所 述高光图像数据和所述非高光图像数据，确定高光绘制数据以及非高光绘制 数据；将所述纹理坐标数据、高光绘制数据以及非高光绘制数据进行叠加处 理，得到处理后的人脸图像。本实施例提供的图像处理方法，能够对高光图 和非高光图分别进行处理，对人脸图像进行还原和绘制，能够避免人脸图像 的失真问题，提高人脸图像的显示效果。
附图说明
[0021]为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实 施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下 面描述中的附图是本公开的一些实施例，对于本领域普通技术人员来讲，在 不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0022]图1为本公开所基于的一种网络架构的示意图；
[0023]图2为本公开实施例提供的一种图像处理方法的流程示意图；
[0024]图3本公开实施例提供的另一种图像处理方法的流程示意图；
[0025]图4为本公开实施例提供的一种图像处理网络的结构示意图；
[0026]图5为本公开实施例提供的又一种图像处理方法的流程示意图；
[0027]图6为本公开实施例提供的一种图像处理装置的结构示意图；；
[0028]图7为本公开实施例提供的电子设备的硬件结构示意图。
具体实施方式
[0029]为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公 开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述， 显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于 本公开中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获 得的所有其他实施例，都属于本公开保护的范围。
[0030]对于图像进行不同的光效渲染处理将影响着图像作品的视觉效果。
[0031]光源重建是光效渲染处理的一种常用技术，通过利用对GAN网络以对 光源的光照参数进行模拟。然后，利用模拟的光照参数对图像进行环境光 照的绘制，得到在该光源下的处理后的图像。
[0032]但是，现有的GAN网络仅能对于低频光源的进行渲染处理，当需要对 高频光源进行渲染处理时，其渲染效果不佳，容易出现图像失真的问题。
[0033]针对这些问题，专利技术人研究发现，可以对人脸图像进行分割，获得人 脸图像的纹理数据、高光图数据和非高光图数据，对高光图和非高光图分 别进行处理，并对纹理数据、处理后的高光图数据和非高光图进行叠加， 得到渲染后的人脸图像，解决了人脸图像的失真问题，提高人脸图像的显 示效果。
[0034]参考图1，图1为本公开所基于的一种网络架构的示意图，如图1所示 的，本公开基
于的一种网络架构可包括人脸图像处理装置1以及终端2。
[0035]其中，人脸图像处理装置1是可与终端2通过网络进行交互的硬件或软 件，其可用于执行下述各实施例中所述的人脸图像处理方法。
[0036]当人脸图像处理装置1为硬件时，包括具备运算功能的云端服务器。当 人脸图像处理装置1为软件时，其可以安装在具备运算功能的电子设备中， 其中的电子设备包括但不限于膝上型便携计算机和台式计算机等等。
[0037]其中，终端2具体可为用户手机、智能家居设备、平板电脑等可用于拍 摄人脸图像并且展现拍摄的人脸图像的硬件设备，而人脸图像处理装置1可 为集成或安装在所述终端2上的服务端。
[0038]人脸图像处理装置1可在终端2上运行，并为终端2提供人脸图像处理 服务，并且，终端1利用其显示器或显示组件向用户显示人脸图像处理装置 1处理后的人脸图像。
[0039]同时，人脸图像处理装置1还可利用终端1的图像拍摄功能，以获取终 端1的人脸图像信息、位置信息、场景信息甚至其他的一些信息资源。
[0040]当然，在其他使用场景中，人脸图像处理装置1还可集成在用于处理 人脸图像的服务器中，如人脸服务器等，此时，终端2则可为包括智能手 机、平板电脑、台式计算机等在内的可与前述的人脸图像处理装置1通过 网络进行通信和数据交互的设备。终端2则可将需要处理的人脸图像发送 至人脸图像处理装置1，以使人脸图像处理装置1以采用如下所示的方本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法，其特征在于，包括：获取待处理的人脸图像；将所述人脸图像输入至训练完毕的图像处理网络，输出人脸图像对应的高光图像数据、非高光图像数据以及纹理坐标数据；根据所述高光图像数据和所述非高光图像数据，确定高光绘制数据以及非高光绘制数据；将所述纹理坐标数据、高光绘制数据以及非高光绘制数据进行叠加处理，得到处理后的人脸图像。2.根据权利要求1所述的图像处理方法，其特征在于，将所述人脸图像输入至训练完毕的图像处理网络，输出人脸图像对应的高光图像数据、非高光图像数据以及纹理坐标数据，包括：利用所述训练完毕的图像处理网络中的图像分割层对输入的人脸图像进行图像分割处理，分别获得人脸图像中的高光区域图像、非高光区域图像以及纹理坐标数据；利用所述训练完毕的图像处理网络中的高光处理层对所述高光区域图像进行卷积处理，获得所述高光图像数据；利用所述训练完毕的图像处理网络中的非高光处理层对所述高光区域图像进行卷积处理，获得所述非高光图像数据。3.根据权利要求2所述的图像处理方法，其特征在于，所述高光图像数据包括平行光参数；以及，所述非高光图像数据包括法向图像参数、颜色图像参数以及光照强度参数。4.根据权利要求3所述的图像处理方法，其特征在于，所述根据所述高光图像数据和所述非高光图像数据，确定高光绘制数据以及非高光绘制数据，包括：利用所述平行光参数和所述法向图像参数进行绘制处理，得到高光绘制数据；利用所述法向图像参数、所述颜色图像参数以及所述光照强度参数进行绘制处理，得到所述非高光绘制数据。5.根据权利要求3所述的图像处理方法，其特征在于，所述光照强度参数为球谐光参数。6.根据权利要求1
‑
5任一项所述的图像处理方法，其特征在于，所述图像处理方法还包括：建立图像处理网络，并获得训练数据集；利用所述训练数据集对所述图像处理网络进行训练，获得训练完毕的图像处理网络。7.根据权利要求6所述的图像处理方法，其特征在于，图像处理网络为残差网络。8.一种图像处理装置，其特征在于，包括：通信模块，用于获取待处理的人脸图像；光效处理模块，用于将所述人脸图像输入至训练完毕的图像处理网络，输出人脸图像对应的高光图像数据、非高光图像数据以及纹理坐标数据...

【专利技术属性】
技术研发人员：王光伟，
申请(专利权)人：北京字跳网络技术有限公司，
类型：发明
国别省市：