基于虚拟换装的图像修复方法、装置、设备及存储介质制造方法及图纸

本申请提出一种基于虚拟换装的图像修复方法、装置、设备及存储介质，该方法包括：根据用户图像和服装模板图像，生成用户图像中脖子的待修复区域掩膜图像；若待修复区域掩膜图像中待修复区域的面积大于0，则生成用户图像对应的背景修复图；根据待修复区域掩膜图像和背景修复图，对用户图像中的脖子区域进行修复。本申请给出了待修复区域的准确计算方式，仅对待修复区域进行修复，不会影响原有的脖子区域，提高修复的准确性。背景修复图的背景色为脖子的主颜色，能避免与脖子不相关的区域对修复的不良影响。修复后再换装，能得到很好的换装效果。装效果。装效果。

【技术实现步骤摘要】
基于虚拟换装的图像修复方法、装置、设备及存储介质


[0001]本申请属于图像处理
，具体涉及一种基于虚拟换装的图像修复方法、装置、设备及存储介质。

技术介绍

[0002]在虚拟换装场景中，将用户图像中的衣服图像替换为服装模板图像中的衣服图像，即实现了虚拟换装。但由于换装前原始用户图片的脖子可能存在部分遮挡，或者换装前的衣服领口和服装模板图像中衣服领口存在差异等原因，导致换装后出现脖子区域不完整，换装效果差。

技术实现思路

[0003]本申请提出基于虚拟换装的图像修复方法、装置、设备及存储介质，给出了待修复区域的确定方式，背景修复图的背景色为脖子的主颜色，能避免与脖子不相关的区域对修复的不良影响，提高后续虚拟换装的效果。
[0004]本申请第一方面实施例提出了基于虚拟换装的图像修复方法，包括：根据用户图像和服装模板图像，生成所述用户图像中脖子的待修复区域掩膜图像；若所述待修复区域掩膜图像中待修复区域的面积大于0，则生成所述用户图像对应的背景修复图；根据所述待修复区域掩膜图像和所述背景修复图，对所述用户图像中的脖子区域本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于虚拟换装的图像修复方法，其特征在于，包括：根据用户图像和服装模板图像，生成所述用户图像中脖子的待修复区域掩膜图像；若所述待修复区域掩膜图像中待修复区域的面积大于0，则生成所述用户图像对应的背景修复图；根据所述待修复区域掩膜图像和所述背景修复图，对所述用户图像中的脖子区域进行修复。2.根据权利要求1所述的方法，其特征在于，所述根据用户图像和服装模板图像，生成所述用户图像中脖子的待修复区域掩膜图像，包括：根据用户图像，获取所述用户图像中脖子区域对应的脖子掩膜图像；根据服装模板图像和所述用户图像，获取所述服装模板图像对应的服装掩膜图像；根据所述脖子掩膜图像和所述服装掩膜图像，生成所述用户图像中脖子的待修复区域掩膜图像。3.根据权利要求2所述的方法，其特征在于，所述根据用户图像，获取所述用户图像中脖子区域对应的脖子掩膜图像，包括：检测用户图像中的所有人脸关键点；根据所述人脸关键点，对所述用户图像进行人脸对齐处理；通过预设语义分割模型从对齐后的所述用户图像中分割出脖子区域；生成所述脖子区域对应的脖子掩膜图像。4.根据权利要求3所述的方法，其特征在于，所述根据服装模板图像和所述用户图像，获取所述服装模板图像对应的服装掩膜图像，包括：通过预先训练的脖子关键点检测模型识别对齐后的所述用户图像中的脖子关键点；将服装模板图像中的预设领口关键点与所述脖子关键点对齐；将对齐后的所述服装模板图像确定为服装掩膜图像。5.根据权利要求2所述的方法，其特征在于，所述根据所述脖子掩膜图像和所述服装掩膜图像，生成所述用户图像中脖子的待修复区域掩膜图像，包括：根据所述脖子掩膜图像中的脖子关键点和所述服装掩膜图像中的预设领口关键点，对所述脖子掩膜图像和所述服装掩膜图像进行拼接，得到拼接掩膜图像；在所述拼接掩膜图像中确定出从服装领口边缘至脖子区域上边缘的待检测区域；从所述待检测区域中确定出待修复区域；生成所述待修复区域对应的待修复区域掩膜图像。6.根据权利要求5所述的方法，其特征在于，所述从所述待检测区域中确定出待修复区域，包括：遍历所述待检测区域中每个像素点的归属图像；筛选出归属图像既不是所述脖子掩膜图像也不是所述服装掩膜图像的所有像素点；将筛选出的所有像素点所组成的区域确定为待修复区域。7.根据权利要求5所述的方法，其特征在于，所述从所述待检测区域中确定出待修复区域，包括：对...

【专利技术属性】
技术研发人员：苗锋，
申请(专利权)人：北京新氧科技有限公司，
类型：发明
国别省市：