【技术实现步骤摘要】
图像处理方法、图像处理系统及电子设备
[0001]本申请涉及计算机
,尤其涉及一种图像处理方法、图像处理系统及电子设备。
技术介绍
[0002]AR(Augmented Reality,增强现实技术)虚拟试妆作为一种新的交互形式已经被广泛引入电商领域或互动领域,成为一种不可或缺的新型购物模式。AR虚拟试妆作为一种主要以AR/AI技术为驱动的产品形式,技术效果决定了最终的用户体验和虚拟试妆的真实程度。因此,打造更加先进的AR虚拟试妆技术体系成为今年来产业界和学术界的一个热门话题。
[0003]目前越来越多的公司相继推出自己的虚拟试妆产品。但现有虚拟试妆技术,生成的虚拟试妆效果还不够好,且对计算资源需求高,处理速度慢,不适于在客户端侧实时运行。
技术实现思路
[0004]为解决或部分改善现有技术存在的问题,本申请各实施例提供一种图像处理方法、图像处理系统及电子设备。
[0005]在本申请的一个实施例中,提供了一种图像处理方法。该方法包括:
[0006]响应于用户浏览商品时触发的试用请求,获取第一用户图像;
[0007]确定目标商品;
[0008]获取所述目标商品对应的商品试效模板,其中,所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的;
[0009]将所述商品试效模板及所述第一用户图像输入合成模型,得到用户虚拟试用所述商品后的第二用户图像;
[0010]显示所述第二用户图像。
[0011]在本申请的另一个实 ...
【技术保护点】
【技术特征摘要】
1.一种图像处理方法,其特征在于,包括:响应于用户浏览商品时触发的试用请求,获取第一用户图像;确定目标商品;获取所述目标商品对应的商品试效模板,其中,所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的;将所述商品试效模板及所述第一用户图像输入合成模型,得到用户虚拟试用所述目标商品后的第二用户图像;显示所述第二用户图像。2.根据权利要求1所述的方法,其特征在于,所述模板生成网络包括:映射网络及生成网络;以及所述方法还包括:对所述目标商品的商品信息进行解析,得到商品参数;对所述商品参数进行编码;利用所述映射网络,确定编码后的所述商品参数对应的第一映射参数;将所述第一映射参数输入至所述生成网络中的不同网络层,执行所述生成网络得到所述目标商品对应的商品试效模板。3.根据权利要求2所述的方法,其特征在于,还包括:获取训练样本,其中,所述训练样本包括:样本参数、待处理样本图像、样本效果图及局部样本图;利用所述映射网络,确定所述样本参数对应的第二映射参数;将所述第二映射参数输入至所述生成网络中的不同网络层,执行所述生成网络得到目标试效模板;将所述目标试效模板与所述待处理样本图像输入渲染网络,执行所述渲染网络得到渲染效果图及局部图;根据所述渲染效果图及所述样本效果图,确定第一损失;根据所述局部图与所述局部样本图,确定第二损失;利用生成对抗损失函数,确定第三损失;基于所述第一损失、所述第二损失及所述第三损失,对所述生成网络进行优化。4.根据权利要求1至3中任一项所述的方法,其特征在于,所述目标商品为彩妆品;解析出的所述商品参数包括如下中的至少一种:颜色参数、材质参数、强度参数、反映所述彩妆品对应高光效果的高光参数、反映妆容效果的妆效参数;以及对所述商品参数进行编码,包括:对所述颜色参数对应直方图进行量化编码;利用独热编码方法,对所述材质参数进行编码;将所述强度参数、所述高光参数或所述妆效参数映射到对应的预设区间中,利用独热编码方法对完成区间映射的参数进行编码。5.根据权利要求1至3中任一项所述的方法,其特征在于,将所述商品试效模板及所述第一用户图像输入合成模型,得到用户虚拟试用所述目标商品后的第二用户图像,包括:基于所述目标商品,识别所述第一用户图像中的至少一个目标部位;对所述第一用户图像中所述至少一个目标部位外围的区域进行处理,以突出所述至少
一个目标部位为试用所述目标商品的部位;将所述商品时效模板及所述处理后的所述第一用户图像输入合成模型,得到用户图像中所述至少一个目标部位虚拟试用所述目标商品后的第二用户图像。6.一种图像处理方法,其特征在于,包括:响应于用户的操作,确定第一图像及目标商品;获取所述目标商品对应的商品试效模板,其中,所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的;将所述商品试效模板及所述第一图像输入合成模型,得到所述第一图像中至少一个目标对象虚拟试用所述目标商品后的第二图像;显示所述第二图像。7.一种图像处理系统,其特征在于,包括:客户端,用于响应于用户的操作,确定第一图像及目标商品;向服务端发送获取所述目标商品对应的商品试效模板的请求;所述服务端,用于根据所述请求获取所述商品试效模板,将所述商品试效模板发送至所述客户端;其中,所述商品试效模板是预先利用模板生成网络对所述目标商品的商品参数进行处理后得到的;所述客户端,还用于将所述商品试效模板及所述第一图像输入合成模型,得到所述第一图像中至少一个目标对象虚拟试用所述商品后的第二图像;显示所述第二图像。8.根据权利要求7所述的系统,其特征在于,所述模板生成网络包括:映射网络及生成网络;以及所述服务端还用于:对所述目标商品...
【专利技术属性】
技术研发人员:黄文军,姚迪狄,
申请(专利权)人:阿里巴巴中国有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。