手势识别迭代方法、装置和头戴式电子设备制造方法及图纸

技术编号:43349259 阅读:28 留言:0更新日期:2024-11-15 20:48
本申请提供了一种手势识别迭代方法、装置和头戴式电子设备,应用于头戴式电子设备,所述头戴式电子设备搭载有手势识别系统以及手势识别优化系统,所述手势识别优化系统包括:真值标注模型、数据采集模块以及Finetune模型;响应于优化指令,确定目标标签,采集与所述目标标签对应的第一手势图像;将所述数据采集模块采集的第一手势图像输入至真值标注模型以输出手势2D真值、手势3D真值,并利用所述手势2D真值生成手部预测框,所述目标图像包括第一手势图像;依据所述目标标签、所述目标图像的手势真值利用Finetune模型对手势识别系统进行Finetune训练,通过本申请使得用户可以根据自身需求对手势识别系统进行设置,提升用户体验感。

【技术实现步骤摘要】

【】本申请实施例涉及通信,尤其涉及一种手势识别迭代方法、装置和头戴式电子设备


技术介绍

0、
技术介绍

1、当前,头戴式电子设备中,可以采用手势交互、手柄交互、眼动追踪进行交互,其中,通过手势交互能够大量传达语义、情感和符合人类日常生活习惯的信息,是人机交互技术的研究重点。

2、相关技术中,采用深度神经网络进行手势识别,鉴于手势识别系统没有迭代功能以及个性化设置功能,因此,手势识别的交互动作是基本固定不变的,换而言之,手势识别系统只能识别例如确认、捏合、放大、缩小等固定动作,同时,用户也无法对识别效果欠佳的手势进行优化。


技术实现思路

0、
技术实现思路

1、本申请实施例提供了一种手势识别迭代方法、装置和头戴式电子设备,以使手势识别系统具备迭代功能以及个性化设置,使得用户可以根据自身需求对手势识别系统个性化设置,提升用户体验感。

2、第一方面,本申请提供了一种手势识别迭代方法,应用于头戴式电子设备,头戴式电子设备搭载有手势识别系统以及手势识别优化系统,手势本文档来自技高网...

【技术保护点】

1.一种手势识别迭代方法,其特征在于,应用于头戴式电子设备,所述头戴式电子设备搭载有手势识别系统以及手势识别优化系统,所述手势识别优化系统包括:真值标注模型、数据采集模块以及Finetune模型;

2.根据权利要求1所述的方法,其特征在于,

3.根据权利要求1所述的方法,其特征在于,

4.根据权利要求3所述的方法,其特征在于,所述将目标图像输入至真值标注模型以输出手势2D真值、手势3D真值的步骤中,

5.根据权利要求3所述的方法,其特征在于,所述检测单元包括:手部检测子单元和大模型2D检测子单元;

6.根据权利要求5所述的方法,...

【技术特征摘要】

1.一种手势识别迭代方法,其特征在于,应用于头戴式电子设备,所述头戴式电子设备搭载有手势识别系统以及手势识别优化系统,所述手势识别优化系统包括:真值标注模型、数据采集模块以及finetune模型;

2.根据权利要求1所述的方法,其特征在于,

3.根据权利要求1所述的方法,其特征在于,

4.根据权利要求3所述的方法,其特征在于,所述将目标图像输入至真值标注模型以输出手势2d真值、手势3d真值的步骤中,

5.根据权利要求3所述的方法,其特征在于,所述检测单元包括:手部检测子单元和大模型2d检测子单元;

6.根据权利要求5所述的方法,其特征在于,所述方法还包括:依据所述目标图像的手势真值对所述手部检测子单元以及所述大模型2d检测子单元利用所述finetine模块进行finetune训练。

7.根据权利要求4所述的方法,其特征在于,所述多相机融合算法单元包括:随机三角化子单元、加权密度聚类子单元、卡尔曼滤波子单元以及多目重投影子单元;

8.根据权利要求5所述的方法,其特征在于,所述随机三角化子单元采用如下公式计算手部3d关键点深度z轴坐标:

9.根据权利要求6所述的方法,其特征在于,所述将k组手部所述3d关键点及对应的关键点置信度输入至所述加权密度聚类子单元进行加权融合输出最优3d关...

【专利技术属性】
技术研发人员:吴伟鑫柴鑫高圣杰张凯
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1