当前位置: 首页 > 专利查询>清华大学专利>正文

一种基于多层高斯点云的可换装人体表征方法及系统技术方案

技术编号:41704823 阅读:16 留言:0更新日期:2024-06-19 12:36
本申请提出一种基于多层高斯点云的可换装人体表征方法及系统,所述方法包括:利用预先搭建的相机系统采集人体的多视角视频;获取视频中各帧的人体姿态特征图,并将各帧人体姿态特征图输入到单层高斯点云模型中,得到各帧对应的人体多通道图像,并确定各帧对应的第一人体高斯点云和第一衣服高斯点云;将各帧人体姿态特征图输入到预先训练好的多层高斯点云模型中,得到各帧人体姿态特征图对应的第二人体高斯点云、第二衣服高斯点云;更新第一人体高斯点云、第一衣服高斯点云;基于拉普拉斯坐标的形变方法将更新后的人体高斯点云和衣服高斯点云进行混合渲染,得到可驱动的换装渲染结果。本申请提出的技术方案,可生成真实感较高的驱动换装视频。

【技术实现步骤摘要】

本申请涉及计算机视觉和计算机图形学,尤其涉及一种基于多层高斯点云的可换装人体表征方法及系统


技术介绍

1、可实现真实感渲染的虚拟试衣、换装是计算机图形学和计算机视觉领域的重点问题。这类技术在电子商务、娱乐等场景有着广泛的应用前景,同时也有降低生成影视、游戏等所需美术资产的成本的极大潜力。目前虽有许多工作关注高质量人体渲染技术,但它们通常不可实现虚拟换衣。另一方面,现有的虚拟试衣方法要么只能生成图像级别的结果,不能生成可驱动的人体动画;要么需要显式地设计衣服的模板,涉及的流程通常比较复杂耗时、且质量难以实现真实感渲染。

2、综上,现有的人体真实感渲染虚拟试衣方法的不足之处在于:部分能实现真实感渲染的方法无法进行换衣,而可换衣的方法一般只能生成图像,无法生成可驱动的视频,或可生成视频但渲染质量与真实感较低,因此,亟需提出一种可以生成高质量的驱动换装视频。


技术实现思路

1、本申请提供一种基于多层高斯点云的可换装人体表征方法及系统,以至少解决生成的换装驱动视频真实感较低的技术问题。

2、本本文档来自技高网...

【技术保护点】

1.一种基于多层高斯点云的可换装人体表征方法,其特征在于,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述获取所述视频中各帧的人体姿态特征图包括:

3.如权利要求1所述的方法,其特征在于,所述单层高斯点云模型的训练过程包括:

4.如权利要求1所述的方法,其特征在于,所述基于各帧所述人体姿态特征图对应的人体多通道图像确定各帧对应的第一人体高斯点云和第一衣服高斯点云包括:

5.如权利要求1所述的方法,其特征在于,所述多层高斯点云模型包括:衣服模型和人体模型。

6.如权利要求1所述的方法,其特征在于,所述基于所述各帧人体姿...

【技术特征摘要】

1.一种基于多层高斯点云的可换装人体表征方法,其特征在于,所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述获取所述视频中各帧的人体姿态特征图包括:

3.如权利要求1所述的方法,其特征在于,所述单层高斯点云模型的训练过程包括:

4.如权利要求1所述的方法,其特征在于,所述基于各帧所述人体姿态特征图对应的人体多通道图像确定各帧对应的第一人体高斯点云和第一衣服高斯点云包括:

5.如权利要求1所述的方法,其特征在于,所述多层高斯点云模型包括:衣服模型和人体模型。

6.如权利要求1所述的方法,其特征在于,...

【专利技术属性】
技术研发人员:刘烨斌林思有李哲
申请(专利权)人:清华大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1