当前位置: 首页 > 专利查询>浙江大学专利>正文

一种基于稠密特征和扩散模型的虚拟试穿方法技术

技术编号:40985364 阅读:23 留言:0更新日期:2024-04-18 21:29
本发明专利技术涉及一种基于稠密特征和扩散模型的虚拟试穿方法,包括:爬取模特试衣图片数据;对所述模特试衣图片数据进行数据处理;对所述训练数据进行清洗;将所述训练数据构建为用于供模型逐批调用的数据集;提取衣服特征,并将所述衣服特征融入Stable diffusion;提取人体姿态特征,并将所述人体姿态特征融入Stable diffusion;分两阶段对模型进行训练。本发明专利技术的有益效果是:本发明专利技术可以只输入衣服和指定人体姿态,利用stable diffusion从海量数据中学习的优势来自动生成符合数据分布的人脸。

【技术实现步骤摘要】

本专利技术涉及虚拟现实,更确切地说,它涉及一种基于稠密特征和扩散模型的虚拟试穿方法


技术介绍

1、近年来,随着人们对时尚产品的网上购物需求不断增长,网络服装购物凭借其巨大的商业优势逐渐超越传统购物方式,推动着一个更接近现实的购物环境的形成。在这个快速变化的时尚市场中,虚拟试穿技术的研究变得至关重要,因为它不仅能够为顾客提供更为丰富的购物体验,还有助于实现与实际试穿相媲美的效果。在目前的网上购物消费模式中,各大电商平台相继推出自己的虚拟试衣模型,以便消费者能更加直观的感受服装的实际上身效果和搭配效果。

2、以往的研究主要采用了分割变形和生成相结合的两阶段过程,以达到更准确、实用的虚拟试穿效果。然而,这种两阶段的方法,模型的生成效果非常受限于第一阶段的warping模型的效果。

3、申请号为cn111275518b的《一种基于混合光流的视频虚拟试穿方法及装置》作者提出了一种基于混合光流的视频虚拟试穿方法及装置。该方法使用语义分割网络提取人体分割图像。对人体图像,姿态,提取人体smpl模型,通过计算两个smpl模型间的3d光流图,然后使本文档来自技高网...

【技术保护点】

1.一种基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,包括:

2.根据权利要求1所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤2包括:

3.根据权利要求2所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤3包括:

4.根据权利要求3所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤4包括:

5.根据权利要求4所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤5中,使用自监督的视觉特征提取模型DinoV2 Large提取衣服平铺图的特征。

6.根据权利要求5所述的基于稠密特征和扩散模...

【技术特征摘要】

1.一种基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,包括:

2.根据权利要求1所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤2包括:

3.根据权利要求2所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤3包括:

4.根据权利要求3所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤4包括:

5.根据权利要求4所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤5中,使用自监督的视觉特征提取模型dinov2 large提取衣服平铺图的特征。

6.根据权利要求5所述的基于稠密特征和扩散模型的虚拟试穿方法,其特征在于,步骤6中,使用...

【专利技术属性】
技术研发人员:焦宇恒陈观林翁文勇杨武剑
申请(专利权)人:浙江大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1