System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于形状控制及纹理引导的个性化虚拟试衣方法技术_技高网
当前位置: 首页 > 专利查询>天津大学专利>正文

一种基于形状控制及纹理引导的个性化虚拟试衣方法技术

技术编号:40593031 阅读:2 留言:0更新日期:2024-03-12 21:54
本发明专利技术涉及人工智能技术领域,提供一种基于形状控制及纹理引导的个性化虚拟试衣方法。具体包括通过第一阶段的形状特征与人体分割图及所述人体姿势信息,通过分割生成网络获得带有目标服装形状的目标分割图;将头部图与目标分割图进行拼接,获得目标拼接图;第二阶段根据人体分割图的标签信息进行对待试穿区域进行蒙版添加处理,获得服装不可知人体图;将纹理特征进行抽象表示,获得重建纹理特征;基于服装不可知人体图、目标拼接图及重建纹理特征,通过扩散模型得到虚拟试衣图像。本发明专利技术生成效果自然,能够实现纹理增强,生成的花纹样式更清晰,并且允许用户通过不同的服装引导调整生成服装的形状和纹理样式。

【技术实现步骤摘要】

本专利技术涉及人工智能,尤其涉及一种基于形状控制及纹理引导的个性化虚拟试衣方法


技术介绍

1、随着人工智能和电子商务的飞速发展,线上购物成为了人们的重要生活方式。但与此同时,服装退货率居高不下,用户满意度不佳,体验感显著下降,而虚拟试衣技术可以在这种应用背景下提升用户购物体验的同时降低运输和人工成本。

2、目前的试衣方法可分为基于配对图像和基于非配对图像的方法。基于配对图像的方法即利用店内平铺图-人体图像对,将平铺服装扭曲并转移至目标人体图像上,基于非配对图像的方法即将人体a所穿着的服装转移至人体b上,若将试衣方法局限于其中的一种场景,显然限制了其使用的广泛性。因此,良好的试衣方法应能够同时应对这两种不同类别的场景。

3、目前已有的尝试将扩散模型应用于虚拟试衣的方法,是首先根据目标姿势获得目标服装扭曲的掩码,并且在反向采样去噪过程中在每一个timestep中通过掩码将两阶段的噪声图混合,并将混合噪声图送入下一个step,该种操作方法会浪费大量算力资源,不利于成本控制及实际使用;而传统的试衣方法在服装扭曲过程中,可能导致人体四肢生成效果不佳,呈现肿胀样式,另外还可能出现服装与人体的不匹配,进而还可能产生伪影等不良效果,并且传统方法往往难以保持服装的细节,导致生成结果中的纹理样式不清晰,导致试衣效果较差,应用性降低。


技术实现思路

1、本专利技术旨在至少解决相关技术中存在的技术问题之一。为此,本专利技术提供一种基于形状控制及纹理引导的个性化虚拟试衣方法。>

2、本专利技术提供一种基于形状控制及纹理引导的个性化虚拟试衣方法,包括:

3、s1:采集获得人体图像及目标服装图像,所述目标服装图像包括目标服装的形状特征及纹理特征;

4、s2:根据所述人体图像提取人体分割图及人体姿势信息,所述人体分割图包括头部图;

5、s3:根据所述人体分割图、所述人体姿势信息及所述形状特征,通过分割生成网络获得带有目标服装形状的目标分割图;

6、s4:将所述头部图与所述目标分割图进行拼接,获得目标拼接图;

7、s5:输入待试穿人体图像,根据所述人体分割图的标签信息进行对所述待试穿人体图像的待试穿区域进行蒙版添加处理,获得服装不可知人体图;

8、s6:将所述纹理特征进行抽象表示,获得重建纹理特征;

9、s7:基于所述服装不可知人体图、所述目标拼接图及所述重建纹理特征,通过扩散模型得到虚拟试衣图像。

10、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s1中的所述人体图像为单人图像。

11、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s1还包括:

12、将所述人体图像及所述目标服装图像统一尺寸。

13、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s2中的所述人体分割图通过人体语义信息,对所述人体图像中的每个像素赋予所述人体语义信息对应的标签获得。

14、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s3还包括:

15、通过像素判别器对所述目标分割图的边缘像素进行标签的重新判别,以对所述目标分割图进行边缘增强。

16、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s5还包括:

17、对输入的待试穿人体图像进行数据增强处理,所述数据增强处理包括高斯平滑、色彩矫正及角度调整。

18、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s6进一步包括:

19、s61:将所述目标服装图像进行压缩;

20、s62:将压缩后的目标服装图像转化为一维条件嵌入;

21、s63:将所述一维条件嵌入输入至训练模型获得重建纹理特征。

22、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s7获得的所述虚拟试衣图像的纹理特征,与步骤s1中的所述目标服装图像的纹理特征相同。

23、根据本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,步骤s7还包括:

24、若扩散模型的输入为其它目标服装图像,则获得的虚拟试衣图像的形状特征为步骤s1中的所述目标服装图像的形状特征,获得的虚拟试衣图像的纹理特征为输入的其它目标服装图像的纹理特征。

25、本专利技术提供的一种基于形状控制及纹理引导的个性化虚拟试衣方法,克服了传统试衣方法的不足,无需通过对服装进行扭曲,有效解决了生成四肢形变,人体服装交界部位模糊,容易出现伪影,仅能实现简单花纹样式的转移等问题,通过第一阶段的形状控制和第二阶段的纹理引导,能够根据试衣者的姿势自适应调整生成服装褶皱,生成效果更自然,能够实现纹理增强,生成的花纹样式更清晰,并且允许用户通过不同的服装引导调整生成服装的形状和纹理样式。

26、本专利技术的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本专利技术的实践了解到。

本文档来自技高网...

【技术保护点】

1.一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,包括:

2.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S1中的所述人体图像为单人图像。

3.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S1还包括:

4.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S2中的所述人体分割图通过人体语义信息,对所述人体图像中的每个像素赋予所述人体语义信息对应的标签获得。

5.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S3还包括:

6.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S5还包括:

7.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S6进一步包括:

8.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S7获得的所述虚拟试衣图像的纹理特征,与步骤S1中的所述目标服装图像的纹理特征相同。

9.根据权利要求8所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤S7还包括:

...

【技术特征摘要】

1.一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,包括:

2.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤s1中的所述人体图像为单人图像。

3.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤s1还包括:

4.根据权利要求1所述的一种基于形状控制及纹理引导的个性化虚拟试衣方法,其特征在于,步骤s2中的所述人体分割图通过人体语义信息,对所述人体图像中的每个像素赋予所述人体语义信息对应的标签获得。

5.根据权利要求1所述的一种基于形状控制及纹理引...

【专利技术属性】
技术研发人员:张淑芳倪敏学丁文鑫王磊
申请(专利权)人:天津大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1