虚拟试衣方法、装置、电子设备及存储介质制造方法及图纸

本发明专利技术提供一种虚拟试衣方法、装置、电子设备及存储介质，虚拟试衣方法，包括：获取人体图像和目标衣物图像；对所述人体图像进行图像分割，确定至少一个人体穿衣区域；基于所述人体图像进行姿态估计，得到多个人体关键点，并基于所述人体关键点对所述目标衣物图像进行处理，得到待试穿衣物图像；基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像。本发明专利技术提供的虚拟试衣方法、装置、电子设备及存储介质，用以解决现有技术中虚拟试衣成本高的缺陷，实现降低虚拟试衣的成本。实现降低虚拟试衣的成本。实现降低虚拟试衣的成本。

【技术实现步骤摘要】
虚拟试衣方法、装置、电子设备及存储介质


[0001]本专利技术涉及图像处理
，尤其涉及一种虚拟试衣方法、装置、电子设备及存储介质。

技术介绍

[0002]随着科学技术的进步和人工智能的发展，智能算法也越来越多的应用到日常生活中，特别是对于衣柜而言，作为每天需要使用的家具用品，其智能化发展是至关重要的，而智能化的关键问题，就在于为日常生活提供便利，比如对衣柜内的衣物进行记录及虚拟试穿。
[0003]现有技术采用3D摄像头来采集人体姿态数据，进而构建人体模型，但是使用3D摄像头会大大提高成本，因而不太适合家用，通常使用于大型的商场，通过3D摄像头可以对顾客身形进行实时获取。但是在家用场景下，没有过多的空间存放体积较大的3D试衣镜，而且3D摄像头对于家庭而言成本较高，不太适用。

技术实现思路

[0004]本专利技术提供一种虚拟试衣方法、装置、电子设备及存储介质，用以解决现有技术中虚拟试衣成本高的缺陷，实现降低虚拟试衣的成本。
[0005]本专利技术提供一种虚拟试衣方法，包括：
[0006]获取人体图像和目标衣物图像；
[0007]对所述人体图像进行图像分割，确定至少一个人体穿衣区域；
[0008]基于所述人体图像进行姿态估计，得到多个人体关键点，并基于所述人体关键点对所述目标衣物图像进行处理，得到待试穿衣物图像；基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像。
[0009]根据本专利技术提供的虚拟试衣方法，所述基于所述人体关键点对所述目标衣物图像进行处理，得到待试穿衣物图像，包括：
[0010]基于所述人体关键点，通过插值算法对所述目标衣物图像进行扭曲处理，得到所述待试穿衣物图像，所述待试穿衣物图像与所述人体穿衣区域的姿态对应。
[0011]根据本专利技术提供的虚拟试衣方法，所述基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像，包括：
[0012]基于所述人体穿衣区域对应的人体关键点和所述目标衣物图像，生成初始合成图像；
[0013]基于所述初始合成图像和所述待试穿衣物图像，生成所述人体穿衣图像。
[0014]根据本专利技术提供的虚拟试衣方法，基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像，包括：
[0015]将所述人体穿衣区域和所述待试穿衣物图像输入试穿模型，生成所述人体穿衣图像；
[0016]其中，所述匹配模型通过下述步骤训练得到：
[0017]将样本穿衣区域和样本试穿衣物图像输入至初始模型，得到样本穿衣图像；所述样本穿衣区域是根据样本人物图像得到的，所述样本试穿衣物图像是根据样本衣物图像得到的；
[0018]基于所述样本试穿衣物图像和所述样本穿衣图像，计算总损失值；
[0019]基于所述总损失值对所述初始模型的参数进行迭代更新，直到满足训练结束条件，得到所述试穿模型。
[0020]根据本专利技术提供的虚拟试衣方法，还包括：
[0021]根据所述样本试穿衣物图像和样本衣物图像，得到第一损失值；
[0022]根据样本人物图像和所述样本穿衣图像，得到第二损失值；
[0023]根据所述第一损失值和所述第二损失值，确定所述总损失值。
[0024]根据本专利技术提供的虚拟试衣方法，获取人体图像和目标衣物图像，包括：
[0025]从终端设备获取所述人体图像；以及，
[0026]从所述终端设备或智能衣柜获取的所述目标衣物图像。
[0027]根据本专利技术提供的虚拟试衣方法，还包括：
[0028]将所述人体穿衣图像投屏至目标家电设备进行显示。
[0029]本专利技术还提供一种虚拟试衣装置，包括：
[0030]获取模块，用于从终端设备获取人体图像，以及目标衣物图像；
[0031]分割模块，用于对所述人体图像进行图像分割，确定至少一个人体穿衣区域；
[0032]初步处理模块，用于基于所述人体图像进行姿态估计，得到多个人体关键点，并基于所述人体关键点对所述目标衣物图像进行处理，得到待试穿衣物图像；
[0033]合成模块，用于基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像。
[0034]本专利技术还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述虚拟试衣方法的步骤。
[0035]本专利技术还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述虚拟试衣方法的步骤。
[0036]本专利技术还提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现如上述任一种所述虚拟试衣方法的步骤。
[0037]本专利技术提供的虚拟试衣方法、装置、电子设备及存储介质，直接获取人体图像以及目标衣物图像，不需要使用三维摄像头对人体进行拍摄，降低试衣成本，而且还可以保护用户隐私。
附图说明
[0038]为了更清楚地说明本专利技术或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0039]图1是本专利技术提供的虚拟试衣方法的流程示意图之一；
[0040]图2是本专利技术提供的虚拟试衣方法的流程示意图之二；
[0041]图3是本专利技术提供的虚拟试衣装置的结构示意图；
[0042]图4是本专利技术提供的电子设备的结构示意图。
具体实施方式
[0043]为使本专利技术的目的、技术方案和优点更加清楚，下面将结合本专利技术中的附图，对本专利技术中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0044]下面结合图1
‑
图4描述本专利技术的虚拟试衣方法、装置、电子设备及存储介质。
[0045]如图1所示，本专利技术提供的虚拟试衣方法，该虚拟试衣方法应用于终端设备，例如虚拟试衣镜，也可以应用于云端服务器，该虚拟试衣方法包括：
[0046]步骤110、获取人体图像和目标衣物图像。
[0047]可以理解的是，可用从终端设备获取人体图像和目标衣物图像，终端设备可以是手机或者平板电脑等设备，也可以是虚拟试衣镜。例如，手机或者平板电脑上存储有人体图像以及目标衣物图像，虚拟试衣镜可以从手机或者平板电脑获取人体图像以及目标衣物图像后，再执行后续的图像处理操作。
[0048]或者，虚拟试衣镜的存储空间内，存储有人体图像以及目标衣物图像，虚拟试衣镜可以直接从自身存储空间内获取人体图像以及目标衣物图像，再执行后续的图像处理操作。
[0049]或者，云端服务器从手机或者平板电脑等终端设备获本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种虚拟试衣方法，其特征在于，包括：获取人体图像和目标衣物图像；对所述人体图像进行图像分割，确定至少一个人体穿衣区域；基于所述人体图像进行姿态估计，得到多个人体关键点，并基于所述人体关键点对所述目标衣物图像进行处理，得到待试穿衣物图像；基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像。2.根据权利要求1所述的虚拟试衣方法，其特征在于，所述基于所述人体关键点对所述目标衣物图像进行处理，得到待试穿衣物图像，包括：基于所述人体关键点，通过插值算法对所述目标衣物图像进行扭曲处理，得到所述待试穿衣物图像，所述待试穿衣物图像与所述人体穿衣区域的姿态对应。3.根据权利要求2所述的虚拟试衣方法，其特征在于，所述基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像，包括：基于所述人体穿衣区域对应的人体关键点和所述目标衣物图像，生成初始合成图像；基于所述初始合成图像和所述待试穿衣物图像，生成所述人体穿衣图像。4.根据权利要求1
‑
3任一项所述的虚拟试衣方法，其特征在于，基于所述人体穿衣区域和所述待试穿衣物图像，生成人体穿衣图像，包括：将所述人体穿衣区域和所述待试穿衣物图像输入试穿模型，生成所述人体穿衣图像；其中，所述试穿模型通过下述步骤训练得到：将样本穿衣区域和样本试穿衣物图像输入至初始模型，得到样本穿衣图像；所述样本穿衣区域是根据样本人物图像得到的，所述样本试穿衣物图像是根据样本衣物图像得到的；基于所述样本试穿衣物图像和所述样本穿衣图像，计算总损失值；基于所述总损失值对所述初始模型的参数进行迭代更新，直到满足训练结束条件，得到所述试穿模型。5.根据权利要求...

【专利技术属性】
技术研发人员：黄媛媛，
申请(专利权)人：海尔智家股份有限公司，
类型：发明
国别省市：