当前位置: 首页 > 专利查询>清华大学专利>正文

基于光流的单视频双手动态三维运动捕捉方法和装置制造方法及图纸

技术编号:41327717 阅读:35 留言:0更新日期:2024-05-13 15:05
本申请提出了一种基于光流的单视频双手动态三维运动捕捉方法,涉及三维视觉与重建技术领域,其中,该方法包括:步骤S1:采集单视角人手图片,并使用双手重建算法确定图片对应的双手姿态;步骤S2:根据采集的图片和确定的双手姿态、人手纹理的先验知识,确定人手纹理贴图,并进一步渲染得到渲染后的图片;步骤S3:通过光流模型计算真实拍摄图片和渲染出的图片之间的光流和光流误差,并根据光流误差优化双手姿态;步骤S4:重复步骤S2、S3,不断优化双手姿态,直至光流误差小于预设阈值或达到最大迭代次数,确定最优双手姿态。采用上述方案的本发明专利技术实现了在单视角采集的上半身或者全身图片中捕捉完整的双手运动并实时重建完整的人手三维模型。

【技术实现步骤摘要】

本申请涉及三维视觉与重建,尤其涉及基于光流的单视频双手动态三维运动捕捉方法和装置


技术介绍

1、三维重建是计算机视觉中的热门领域,在产学研结合方面有着广泛的研究和应用潜力。其中人类运动相关的三维重建技术在工业、娱乐等领域都有不可或缺的应用价值,而人手的三维重建是人体重建的一个重要组成部分,其在vr/ar,裸眼3d等场景相关的人机交互中有着重要的应用。现有的三维人手重建算法大多依赖于人手在图片中的中间位置并占据图片的大部分,或者只能重建单手的情况。而在现有的实际应用情况中,人手的重建往往与人体的重建共用一套图片采集系统,采集的图片中人手不占主体部分;并且实际的人手运动中往往存在着大量诸如鼓掌、握手、双手交叉等双手有着紧密交互的情况。


技术实现思路

1、本申请旨在至少在一定程度上解决相关技术中的技术问题之一。

2、为此,本申请的第一个目的在于提出一种基于光流的单视频双手动态三维运动捕捉方法,解决了现有方法仅对人体整体重建,人手不占主体的技术问题,实现了在单视角采集的上半身或者全身图片中捕捉完整的双手本文档来自技高网...

【技术保护点】

1.一种基于光流的单视频双手动态三维运动捕捉方法,其特征在于,包括以下步骤:

2.如权利要求1所述的方法,其特征在于,所述采集单视角人手图片,包括:

3.如权利要求2所述的方法,其特征在于,所述根据采集的图片和确定的双手姿态、人手纹理的先验知识,确定人手纹理贴图,包括:

4.如权利要求3所述的方法,其特征在于,所述通过光流模型计算真实拍摄图片和渲染出的图片之间的光流和光流误差,包括:

5.一种基于光流的单视频双手动态三维运动捕捉装置,其特征在于,包括图片采集模块、姿态重建模块、误差确认模块、姿态优化模块,其中,

<p>6.如权利要求5...

【技术特征摘要】

1.一种基于光流的单视频双手动态三维运动捕捉方法,其特征在于,包括以下步骤:

2.如权利要求1所述的方法,其特征在于,所述采集单视角人手图片,包括:

3.如权利要求2所述的方法,其特征在于,所述根据采集的图片和确定的双手姿态、人手纹理的先验知识,确定人手纹理贴图,包括:

4.如权利要求3所述的方法,其特征在于,所述通过光流模型计算真实拍摄图片和渲染出的图片之间的光流和光流误差,包括:

5.一种基于光流的单视频双手动态三维运动捕捉装置,其特征在于,包括图片采集模块、姿态重建模块、误差确认模块、姿态优化模块,其中,

6.如权利要求5所述的装置,其特征在于,所述采集...

【专利技术属性】
技术研发人员:刘烨斌李梦成
申请(专利权)人:清华大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1