一种基于扩散模型保持局部细节的虚拟试衣系统及方法技术方案

本发明专利技术公开的是一种基于扩散模型保持局部细节的虚拟试衣系统及方法，通过人物视觉特征模型获取试装模特的图像特征,利用扩散模型的生成能力，可控地实现从高斯噪声逐步生成试衣效果，并且采用双流结构提升局部细节，确保衣物的褶皱、纹理和细微设计元素的保真度，该方法包括数据预处理、扩散模型训练、图像生成和后处理等步骤，与现有技术相比，本发明专利技术不仅能够生成逼真的虚拟试衣效果，还能够保持衣服在不同部位的纹理、结构及细节信息，有效提升虚拟试衣的用户体验，适用于电商平台、虚拟购物应用等领域，具有良好的应用前景。

【技术实现步骤摘要】

本专利技术涉及一种虚拟试衣系统及方法，更具体一点说，涉及一种基于扩散模型保持局部细节的虚拟试衣系统及方法，属于计算机视觉和人工智能领域。

技术介绍

1、传统的在线购物方式无法提供用户真实的试穿体验，用户往往难以判断衣物的款式、尺寸和穿着效果。为了解决这一问题，虚拟试衣技术应运而生。虚拟试衣是一种特定的图像生成功能，给定试衣模特，可以是用户上传的自身图片，也可以是商家指定的用于产品展示的人物模特，同时给定需要试穿的服装，直接生成试装模特穿着给定服装的效果，不需要实际换装而直接利用人工智能生成的图像生成技术。通过将用户虚拟化、服装数字化，模拟真实试穿场景，使用户能够更直观地看到服装的上身效果，避免了商家的产品展示需要模特拍摄着装效果，通常费时费力。

2、但是现有的虚拟试衣系统是基于三维建模和计算机图形学技术，虽然能一定程度上模拟衣物的动态和穿着效果，但存在以下几个主要问题：首先，服装与人体之间存在较大缝隙或变形，上身效果不够自然且对服装的细节和材质表现不足；其次，由于人体形态的多样性，对个性化需求的支持有限，无法满足用户对特定风格或尺寸的个性化需求本文档来自技高网...

【技术保护点】

1.一种基于扩散模型保持局部细节的虚拟试衣系统，其特征在于，包括用于获取服装和用户待试衣图像的模块、用于模特图像语义分割和姿势形态的特征处理模块、用于生成虚拟试衣效果图的扩散模型生成模块、用于将生成的虚拟试衣效果图反馈给用户的输出模块；

2.根据权利要求1所述的一种基于扩散模型保持局部细节的虚拟试衣系统，其特征在于，所述扩散模型用于生成虚拟试衣效果图，逐步去噪生成模特与服装结合后的逼真图像；所述扩散模型的工作流程包含前向扩散过程和反向生成过程；

3.根据权利要求2所述的一种基于扩散模型保持局部细节的虚拟试衣系统，其特征在于， 训练过程中所述扩散模型的训练目标是最小...

【技术特征摘要】

1.一种基于扩散模型保持局部细节的虚拟试衣系统，其特征在于，包括用于获取服装和用户待试衣图像的模块、用于模特图像语义分割和姿势形态的特征处理模块、用于生成虚拟试衣效果图的扩散模型生成模块、用于将生成的虚拟试衣效果图反馈给用户的输出模块；

2.根据权利要求1所述的一种基于扩散模型保持局部细节的虚拟试衣系统，其特征在于，所述扩散模型用于生成虚拟试衣效果图，逐步去噪生成模特与服装结合后的逼真图像；所述扩散模型的工作流程包含前向扩散过程和反向生成过程；

3.根据权利要求2所述的一种基于扩散模型保持局部细节的虚拟试衣系统，其特征在于， 训练过程中所述扩散模型的训练目标是最小化每个时间步之间的去噪误差，通过一个l2 损失函数来实现：

4.根据权利要求2或3所述的一种基于扩散模型保持局部细节的虚拟试衣系统，其特征于，所述扩散模型的反向生成过程用于虚拟试衣效果的生成，具体包括：

5.一种基于扩散模型保持局部细节的虚拟试衣方法，其特征在于该方法包括以下步骤：

6.根据权利要求5所述的一种基于扩散模型保持局部细节的虚拟试衣方法，其特征在于，步骤2具体包括：通过mask2former网络获取模特的语义分割图，选择特定服装语义的编号获取特定的掩膜，根据服装类型和掩膜区域进行扩张，用以兼容不同款式的服装；

7.根据权利要求6所述的一种基于扩散模型保持局部细节的虚拟试衣方法，其特征在于，通...

【专利技术属性】
技术研发人员：刘俊，黄园豪，
申请(专利权)人：杭州淘粉吧网络技术股份有限公司，
类型：发明
国别省市：