当前位置: 首页 > 专利查询>广西大学专利>正文

一种基于视觉的手部关节遮挡判别方法及装置制造方法及图纸

技术编号:43317412 阅读:39 留言:0更新日期:2024-11-15 20:18
本发明专利技术公开了一种基于视觉的手部关节遮挡判别方法及装置,涉及手部姿态估计领域,包括:将相机位置作为坐标原点对手部关节模型进行拍摄,将手部关节点视为目标点,分别与其相邻点和原点连线,两条连线形成角度小于十五度时,则为单手自遮挡或双手互遮挡;将目标点与其非相邻手部关节区域均投影在相机的像平面上并拟合出非相邻手部关节区域投影的外轮廓;当目标点投影位于外轮廓内,且目标点与像平面的垂直距离大于非相邻手部关节区域与像平面的垂直距离,则为单手自遮挡或双手互遮挡;以目标点与原点连线为轴画圆柱体,圆柱体内部包含物体点云数据时,则为物体遮挡。本发明专利技术能够获取任意手部交互状态下所有手部关节被遮挡的信息。

【技术实现步骤摘要】

本专利技术涉及手部姿态估计领域,特别涉及一种基于视觉的手部关节遮挡判别方法及装置


技术介绍

1、基于视觉的手部互动能够直观的表达人类在增强现实操作、手语对话、抓取物体等方面的意图,已经成为了人类活动场景的一个重要的手段。

2、现有技术中,手部姿态估计与手部模型重建的数据集,没有提供关于手部遮挡相关的信息,并且基于手部获取的数据集没有提供遮挡标签,现有算法通过时序图像或多视角图像来缓解关节遮挡带来的信息缺失,在算法的计算过程中会粗略预测手指被遮挡的概率,针对不同的概率在算法中采取不同的建模策略,如对可见关节采用单一高斯分布建模,对遮挡关节采用多分量高斯混合模型建模,从而指导后续的手部姿态估计结果。

3、但是,上述技术方案即使采用建模策略缓解关节遮挡带来的信息缺失,但无法考虑到面对单手自遮挡、双手互遮挡或物体遮挡的情况时,获取每个手部关节被遮挡的信息。


技术实现思路

1、本专利技术实施例提供一种基于视觉的手部关节遮挡判别方法及装置,可以解决现有技术中,存在无法获取任意手部交互状态下所有手本文档来自技高网...

【技术保护点】

1.一种基于视觉的手部关节遮挡判别方法,其特征在于,包括以下步骤:

2.如权利要求1所述的一种基于视觉的手部关节遮挡判别方法,其特征在于,所述手部关节模型上的多个手部关节点和多个手部关节区域的获取,具体步骤包括:

3.如权利要求1所述的一种基于视觉的手部关节遮挡判别方法,其特征在于,所述将目标点与该目标点的非相邻手部关节区域均投影在相机的像平面上,具体步骤包括:

4.如权利要求1所述的一种基于视觉的手部关节遮挡判别方法,其特征在于,所述判断为双手互遮挡还包括非相邻手部关节区域的划分,具体包括:

5.如权利要求1所述的一种基于视觉的手部关节遮...

【技术特征摘要】

1.一种基于视觉的手部关节遮挡判别方法,其特征在于,包括以下步骤:

2.如权利要求1所述的一种基于视觉的手部关节遮挡判别方法,其特征在于,所述手部关节模型上的多个手部关节点和多个手部关节区域的获取,具体步骤包括:

3.如权利要求1所述的一种基于视觉的手部关节遮挡判别方法,其特征在于,所述将目标点与该目标点的非相邻手部关节区域均投影在相机的像平面上,具体步骤包括:

4.如权利要求1所...

【专利技术属性】
技术研发人员:李少东刘熹罗凯
申请(专利权)人:广西大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1