皮肤区域图像数据生成处理及直播图像处理方法、装置制造方法及图纸

本申请涉及人工智能及直播技术领域，提供了一种皮肤区域图像数据的生成处理方法、直播图像处理方法、装置、设备和介质。本申请能够能够快速生成规模大、场景覆盖广及精度高的皮肤区域图像数据集。该方法包括：将已有的包含皮肤区域的样本图像输入皮肤区域分割模型和人像区域分割模型，获取两个模型各自输出的该样本图像对应的皮肤区域标注图像和人像区域标注图像，获取场景替换图像，根据前述人像区域标注图像，将样本图像中人像区域与场景替换图像进行合成得到合成图像，根据合成图像中人像区域的位置信息和前述皮肤区域标注图像获取合成图像对应的皮肤区域标注图像，基于合成图像及其皮肤区域标注图像得到新生成的皮肤区域图像数据。域图像数据。域图像数据。

【技术实现步骤摘要】
皮肤区域图像数据生成处理及直播图像处理方法、装置


[0001]本申请涉及人工智能及直播
，特别是涉及一种皮肤区域图像数据的生成处理方法、直播图像处理方法、装置、电子设备和计算机可读存储介质。

技术介绍

[0002]随着人工智能技术的发展，基于深度学习的图像处理被应用于各种领域以执行相应的图像处理任务，其中包含利用基于深度学习的皮肤区域处理模型应用于对图像中皮肤区域的处理任务中。其中，随着基于大规模人工标注的图像数据集的开源，基于深度学习的图像分割技术得到了快速的发展和应用。皮肤区域分割作为一项基础能力，在皮肤特征识别、美颜美白和图像内容审核方面都有广泛而重要的应用。
[0003]在目前的技术中，大规模人工标注的图像数据集多针对粗粒度对象的整体区域分割任务，而针对人体皮肤区域这一局部细粒度层级的图像数据集数量和种类不足，导致其不具备可用于训练具有高泛化性的皮肤区域分割模型的能力。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种皮肤区域图像数据的生成处理方法、直播图像处理方法、装置、电子设备和计算机可读存储介质。
[0005]第一方面，本申请提供了一种皮肤区域图像数据的生成处理方法。所述方法包括：
[0006]将已有的包含皮肤区域的样本图像输入皮肤区域分割模型，将所述已有的包含皮肤区域的样本图像输入人像区域分割模型；
[0007]获取所述皮肤区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的皮肤区域标注图像，获取所述人像区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的人像区域标注图像；
[0008]获取满足预设场景条件的场景替换图像；
[0009]根据所述人像区域标注图像，将所述已有的包含皮肤区域的样本图像中人像区域与所述场景替换图像进行合成处理得到合成图像；
[0010]根据所述合成图像中人像区域的位置信息和所述皮肤区域标注图像，获取所述合成图像对应的皮肤区域标注图像；
[0011]基于所述合成图像及其对应的皮肤区域标注图像，得到新生成的皮肤区域图像数据。
[0012]在其中一个实施例中，所述根据所述人像区域标注图像，将所述已有的包含皮肤区域的样本图像中人像区域与所述场景替换图像进行合成处理得到合成图像，包括：根据所述人像区域标注图像，从所述已有的包含皮肤区域的样本图像中提取包含人像区域的人像区域图像块；根据所述场景替换图像的尺寸信息，将所述人像区域图像块进行一定比例的缩放处理，得到缩放处理的人像区域图像块；将所述缩放处理的人像区域图像块与所述场景替换图像进行合成处理得到合成图像。
[0013]在其中一个实施例中，所述根据所述场景替换图像的尺寸信息，将所述人像区域图像块进行一定比例的缩放处理，包括：获取在预设缩放比例范围内的缩放比例；按照所述缩放比例将所述场景替换图像进行缩放处理，得到缩放处理的场景替换图像；根据所述缩放处理的场景替换图像的尺寸信息，将所述人像区域图像块进行一定比例的缩放处理。
[0014]在其中一个实施例中，所述方法还包括：根据所述人像区域图像块在所述已有的包含皮肤区域的样本图像中的位置信息，从所述已有的包含皮肤区域的样本图像对应的皮肤区域标注图像中提取皮肤区域图像块；根据对所述人像区域图像块进行缩放处理的比例，对所述皮肤区域图像块进行缩放处理，得到缩放处理的皮肤区域图像块；所述根据所述合成图像中人像区域的位置信息和所述皮肤区域标注图像，获取所述合成图像对应的皮肤区域标注图像，包括：根据所述合成图像中缩放处理的人像区域图像块的位置信息和所述缩放处理的皮肤区域图像块，获取所述合成图像对应的皮肤区域标注图像。
[0015]在其中一个实施例中，所述获取满足预设场景条件的场景替换图像，包括：从场景替换图像库中获取待选场景替换图像；将所述待选场景替换图像输入所述人像区域分割模型，获取所述人像区域分割模型对所述待选场景替换图像的人像区域分割结果；若所述人像区域分割结果属于目标类分割结果，则将所述待选场景替换图像设为满足预设场景条件的场景替换图像。
[0016]在其中一个实施例中，所述基于所述合成图像及其对应的皮肤区域标注图像，得到新生成的皮肤区域图像数据，包括：根据所述合成图像及其对应的皮肤区域标注图像，以及所述已有的包含皮肤区域的样本图像及其对应的皮肤区域标注图像，得到新生成的皮肤区域图像数据；基于所述新生成的皮肤区域图像数据得到训练数据并应用于对所述皮肤区域分割模型的再次训练，使得所述皮肤区域分割模型满足预设训练条件。
[0017]第二方面，本申请提供了一种直播图像处理方法。所述方法包括：
[0018]获取直播中待处理的直播图像；
[0019]通过经训练的皮肤区域分割模型确定所述直播图像中的皮肤区域；其中，所述皮肤区域分割模型利用根据如上所述的方法生成的皮肤区域图像数据训练得到；
[0020]在所述直播图像中的皮肤区域添加皮肤处理效果。
[0021]第三方面，本申请提供了一种皮肤区域图像数据的生成处理装置。所述装置包括：
[0022]图像输入模块，用于将已有的包含皮肤区域的样本图像输入皮肤区域分割模型，将所述已有的包含皮肤区域的样本图像输入人像区域分割模型；
[0023]标注得到模块，用于获取所述皮肤区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的皮肤区域标注图像，获取所述人像区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的人像区域标注图像；
[0024]图像获取模块，用于获取满足预设场景条件的场景替换图像；
[0025]图像合成模块，用于根据所述人像区域标注图像，将所述已有的包含皮肤区域的样本图像中人像区域与所述场景替换图像进行合成处理得到合成图像；
[0026]标注获取模块，用于根据所述合成图像中人像区域的位置信息和所述皮肤区域标注图像，获取所述合成图像对应的皮肤区域标注图像；
[0027]数据得到模块，用于基于所述合成图像及其对应的皮肤区域标注图像，得到新生成的皮肤区域图像数据。
[0028]第四方面，本申请提供了一种直播图像处理装置。所述装置包括：
[0029]直播图像获取模块，用于获取直播中待处理的直播图像；
[0030]皮肤区域确定模块，用于通过经训练的皮肤区域分割模型确定所述直播图像中的皮肤区域；其中，所述皮肤区域分割模型利用通过如上所述的皮肤区域图像数据的生成处理装置生成的皮肤区域图像数据训练得到；
[0031]皮肤效果添加模块，用于在所述直播图像中的皮肤区域添加皮肤处理效果。
[0032]第五方面，本申请提供了一种电子设备。所述电子设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
[0033]将已有的包含皮肤区域的样本图像输入皮肤区域分割模型，将所述已有的包含皮肤区域的样本图像输入人像区域分割模型；获取所述皮肤区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的皮肤本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种皮肤区域图像数据的生成处理方法，其特征在于，所述方法包括：将已有的包含皮肤区域的样本图像输入皮肤区域分割模型，将所述已有的包含皮肤区域的样本图像输入人像区域分割模型；获取所述皮肤区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的皮肤区域标注图像，获取所述人像区域分割模型输出的所述已有的包含皮肤区域的样本图像对应的人像区域标注图像；获取满足预设场景条件的场景替换图像；根据所述人像区域标注图像，将所述已有的包含皮肤区域的样本图像中人像区域与所述场景替换图像进行合成处理得到合成图像；根据所述合成图像中人像区域的位置信息和所述皮肤区域标注图像，获取所述合成图像对应的皮肤区域标注图像；基于所述合成图像及其对应的皮肤区域标注图像，得到新生成的皮肤区域图像数据。2.根据权利要求1所述的方法，其特征在于，所述根据所述人像区域标注图像，将所述已有的包含皮肤区域的样本图像中人像区域与所述场景替换图像进行合成处理得到合成图像，包括：根据所述人像区域标注图像，从所述已有的包含皮肤区域的样本图像中提取包含人像区域的人像区域图像块；根据所述场景替换图像的尺寸信息，将所述人像区域图像块进行一定比例的缩放处理，得到缩放处理的人像区域图像块；将所述缩放处理的人像区域图像块与所述场景替换图像进行合成处理得到合成图像。3.根据权利要求2所述的方法，其特征在于，所述根据所述场景替换图像的尺寸信息，将所述人像区域图像块进行一定比例的缩放处理，包括：获取在预设缩放比例范围内的缩放比例；按照所述缩放比例将所述场景替换图像进行缩放处理，得到缩放处理的场景替换图像；根据所述缩放处理的场景替换图像的尺寸信息，将所述人像区域图像块进行一定比例的缩放处理。4.根据权利要求2所述的方法，其特征在于，所述方法还包括：根据所述人像区域图像块在所述已有的包含皮肤区域的样本图像中的位置信息，从所述已有的包含皮肤区域的样本图像对应的皮肤区域标注图像中提取皮肤区域图像块；根据对所述人像区域图像块进行缩放处理的比例，对所述皮肤区域图像块进行缩放处理，得到缩放处理的皮肤区域图像块；所述根据所述合成图像中人像区域的位置信息和所述皮肤区域标注图像，获取所述合成图像对应的皮肤区域标注图像，包括：根据所述合成图像中缩放处理的人像区域图像块的位置信息和所述缩放处理的皮肤区域图像块，获取所述合成图像对应的皮肤区域标注图像。5.根据权利要求1所述的方法，其特征在于，所述获取满足预设场景条件的场景替换图像，包括：
从场景替换图像库中获取待选场景替换图像；将所述待选场景替换图像输入所述人像区域分割模型，获取所述人像区域分割模型对所述待选场景替换图像的人像区域分割结果...

【专利技术属性】
技术研发人员：郑康元，钟耿君，王璞，陈增海，
申请(专利权)人：广州方硅信息技术有限公司，
类型：发明
国别省市：