服装风格迁移系统与方法技术方案

本发明专利技术属于服装智能制造技术领域，公开了一种服装风格迁移系统与方法，包括图像信息处理单元、图像特征提取单元、风格迁移生成单元和生成图像增强单元；所述图像信息处理单元用于选择采集目标风格服装图像以及待转换风格的服装图像；所述图像特征提取单元用于处理目标服饰风格特征和自身风格特征；所述风格迁移生成单元用于对待转换风格的服饰进行对应风格的迁移融合；所述生成图像增强单元用于生成待转换风格服饰图像的语义分割图，并利用语义分割图对变形的背景进行割离，还原迁移图像的背景。利用其中一方服装的风格，渲染生成由另一方形状，轮廓限定的新的样式的服装。能够大幅提高服装设计的效率，提升用户感官体验。

【技术实现步骤摘要】
服装风格迁移系统与方法
本专利技术属于智能服装
，更具体地，涉及一种服装风格迁移系统与方法。
技术介绍
目前，用户在生活中进行网上服饰选购时，又可能出现对一件服装的风格和另一件服装的样式产生搭配的感性联想，但是没有实物作为参考，导致服装展示效果存在一定缺陷，给用户购物带来较差的体验。现有技术公开了一种服装风格的设计搭配方法，通过统计大量的服装数据，计算其中的粗粒度的风格权重，然后根据权重来搭配用户适合风格的列表。一方面，由于用户喜好的多样性，有限的数据存量并不能满足所有用户的需求，另一方面，在多种条件限定之下，很少的给用户多自由度的选择，若在最后的结果列表中没有用户心仪的选择，则接下来系统就会失去它的作用。公开号为CN111680760A的中国专利“服装风格识别方法、装置、电子设备及存储介质”、申请号为2019105277723的中国专利“基于PCCS体系通过色域判断服装风格类别的方法”均是通过算法来区分不同服装之间的不同风格，而没有将已知的服装风格转嫁到别的服装上形成新的服装样式。申请号为2018116283598的中国专利“一种服装款型风格匹配的方法及其系统”采用一种服装款型匹配的方法和系统，其预先在数据库中存入服装结构属性，根据风格属性权重计算服装风格的诊断结果，再根据用户的穿衣风格从数据库推出适合用户的风格，最后依靠用户手动从中挑选最满意的一款。该方法所涉及到的数据库比较庞大负责，且算法要计算不同的用户和服装之间的权重，最后进行合适风格的选取搭配，算法相对比较复杂，而且用户自由度不高，不能自主进行设计服装风格。
技术实现思路
本专利技术所要解决的技术问题是提供一种服装风格迁移系统与方法，能够优化现有的服装风格迁移系统的系统结构和算法。为解决上述技术问题，本专利技术所采用的技术方案是：一种服装风格迁移系统，包括图像信息处理单元、图像特征提取单元、风格迁移生成单元和生成图像增强单元；所述图像信息处理单元用于选择采集目标风格服装图像以及待转换风格的服装图像；所述图像特征提取单元用于处理目标服饰风格特征和自身风格特征；所述风格迁移生成单元用于对待转换风格的服饰进行对应风格的迁移融合；所述生成图像增强单元用于生成待转换风格服饰图像的语义分割图，并利用语义分割图对变形的背景进行割离，还原迁移图像的背景。优选的方案中，所述目标风格服装图像，是指需要对其特征进行学习迁移的图像作为示范图像进行风格学习；待转换风格的服装图像是指需要被更换风格的服装图像。优选的方案中，采用图像预处理，对系统所需求的关键服饰信息进行筛选和提取；其中图像预处理是指对图像进行w×h大小的缩放，并对图像进行语义分割，剔除图像中强干扰的背景，并保留服装部分；所述语义分割是指创建对应大小的单通道图像，其中分别将不同的服装类型用不同的编码表示，如将背景统一用数值a表示，上衣用数值b表示，下衣用数值c表示，在同一编码的区域和图像进行与操作，便可对图像进行分割。优选的方案中，所述对风格的提取在于提取目标风格服装图像中的颜色、花纹和纹理风格特征和待转换风格的服装图像的形状和/或轮廓特征。优选的方案中，所述对风格的迁移，采用风格迁移算法将目标风格服装图像A的风格特征迁移到另一件待转换风格的服装图像B的形状和/或轮廓特征上，生成具有B的状和/或轮廓和A的风格特征的结果。优选的方案中，所述语义分割图是将图像中的风格特征单独的分割出来，其余部分被分割为背景，利用分割图像将迁移过风格的服装图像和原图像的背景进行融合，实现迁移后对图像背景的还原。优选的方案中，风格特征的表示方法为，颜色采用cmyk色系，图案采用向量化图案，纹理采用四方或两方连续光栅化图片，风格特征为上述一种特征或多种特征的组合。一种采用上述的一种服装风格迁移系统的迁移方法，使用具有编码和解码功能的卷积神经网络，其步骤如下：S1、对输入的风格代表图像进行分割处理，通过语义分割算法单独将图像中的服装提取出来；S2、对提取的风格代表图像和原始的形状代表图像进行通道方向的连接，并使用网络中的编码部分对图像进行卷积编码，提取图像高级的特征信息；S3、将通过编码得到的目标风格服装图像的颜色，花纹，纹理细粒度信息和待转换风格的服装图像的轮廓、形状，位置信息进行融合，即进行n次维度不变的卷积操作；S4、利用服装风格迁移算法，对两类服装的细粒度信息和形状信息，进行卷积融合；细粒度信息包括颜色，花纹和纹理特征；形状信息包括形状、轮廓和自身相对位置关系；S5、利用网络中的解码部分对融合的高级特征向量进行进一步解码，将服装的细粒度信息和形状信息信息进行重新组合，生成合理的合成后的服装图像；S6、将被分割的待转换风格的服装图像的原背景和已转换风格的服装图像进行拼接融合，合成最后保持背景信息的服装图像。优选的方案中，采用一组成对的服饰A,B，进行风格从A迁移到B的转换；采用局部到局部的迁移方法，仅对服装的局部颜色和纹理风格的迁移；若迁移后背景失真，则利用语义分割对其进行无关部分的补充，以提高图像的生成质量。优选的方案中，使用目标服装的风格特征由参考服装所确定，通过服装的迁移过程后，目标服装除外缘轮廓外，汲取到了全部的参考服装风格；利用卷积神经网络经过多层卷积提取到的服装颜色，图案，纹理等高维度的混合特征向量，即该特征向量拥有潜在的所有特征风格特征的细粒度信息；还包括利用反卷积操作对该特征向量进行解码操作，根据神经网络的反向传播，以实现风格特征的识别。本专利技术提供了一种服装风格迁移系统与方法，通过采用上述的技术方案，与现有技术相比，具有以下的有益效果：（1）本专利技术提供的新型的服装风格迁移系统通过两张不相关的包含服装的图像，利用其中一方服装的风格，渲染生成由另一方形状，轮廓限定的新的样式的服装。利用局部特征提取算法，将注意力只关注在图像中服装的风格上，避免背景的干扰。使用背景还原的融合算法，保证了在算法生成图像之后，对其余背景部分产生变化的还原，以最大程度保证图像的高质量，相比于现有技术，可极大减少计算成本和降低系统复杂性，提高了图像的呈现效果，以提升用户感官体验；在用户进行网上服装选购的时候，可能会对一件服装的风格和另一件服装的样式产生搭配的感性联想，但是没有实物作为参考，导致服装展示效果存在一定缺陷，给用户购物带来较差的体验。本专利技术所提供的这种新型的服装风格迁移系统，可以任意选择心仪的两张服装图像，通过算法，将服装A的风格迁移到服装B上，生成新的服装，让用户够很大程度上自由的搭配自己喜欢的风格样式，且只关注服装本身，对背景部分做了很大程度上的保留，提升了用户体验。本专利技术能够大幅提高服装设计的效率。（2）本专利技术提供的这种新型的服装风格迁移系统，不仅可以应用在线上商城中，在其他嵌入式设备中同样适用。附图说明下面结合附图和实施例对本专利技术作进一步说明：图1为本专利技术的服装风格迁移系统的本文档来自技高网...

【技术保护点】
1.一种服装风格迁移系统，其特征是，包括图像信息处理单元、图像特征提取单元、风格迁移生成单元和生成图像增强单元；/n所述图像信息处理单元用于选择采集目标风格服装图像以及待转换风格的服装图像；/n所述图像特征提取单元用于处理目标服饰风格特征和自身风格特征；/n所述风格迁移生成单元用于对待转换风格的服饰进行对应风格的迁移融合；/n所述生成图像增强单元用于生成待转换风格服饰图像的语义分割图，并利用语义分割图对变形的背景进行割离，还原迁移图像的背景。/n

【技术特征摘要】
20201228 CN 20201157402541.一种服装风格迁移系统，其特征是，包括图像信息处理单元、图像特征提取单元、风格迁移生成单元和生成图像增强单元；
所述图像信息处理单元用于选择采集目标风格服装图像以及待转换风格的服装图像；
所述图像特征提取单元用于处理目标服饰风格特征和自身风格特征；
所述风格迁移生成单元用于对待转换风格的服饰进行对应风格的迁移融合；
所述生成图像增强单元用于生成待转换风格服饰图像的语义分割图，并利用语义分割图对变形的背景进行割离，还原迁移图像的背景。


2.根据权利要求1所述的服装风格迁移系统，其特征是，所述目标风格服装图像，是指需要对其特征进行学习迁移的图像作为示范图像进行风格学习；待转换风格的服装图像是指需要被更换风格的服装图像。


3.根据权利要求1所述的服装风格迁移系统，其特征是，采用图像预处理，对系统所需求的关键服饰信息进行筛选和提取；
其中图像预处理是指对图像进行w×h大小的缩放，并对图像进行语义分割，剔除图像中强干扰的背景，并保留服装部分；
所述语义分割是指创建对应大小的单通道图像，其中分别将不同的服装类型用不同的编码表示，如将背景统一用数值a表示，上衣用数值b表示，下衣用数值c表示，在同一编码的区域和图像进行与操作，便可对图像进行分割。


4.根据权利要求1所述的服装风格迁移系统，其特征是，所述对风格的提取在于提取目标风格服装图像中的颜色、花纹和纹理风格特征和待转换风格的服装图像的形状和/或轮廓特征。


5.根据权利要求1所述的服装风格迁移系统，其特征是，所述对风格的迁移，采用风格迁移算法将目标风格服装图像A的风格特征迁移到另一件待转换风格的服装图像B的形状和/或轮廓特征上，生成具有B的状和/或轮廓和A的风格特征的结果。


6.根据权利要求1所述的服装风格迁移系统，其特征是，所述语义分割图是将图像中的风格特征单独的分割出来，其余部分被分割为背景，利用分割图像将迁移过风格的服装图像和原图像的背景进行融合，实现迁移后对图像背景的还原。
...

【专利技术属性】
技术研发人员：余锋，杜成虎，姜明华，周昌龙，
申请(专利权)人：武汉纺织大学，
类型：发明
国别省市：湖北;42