一种可穿戴手语手势识别系统及方法技术方案

技术编号:38525792 阅读:28 留言:0更新日期:2023-08-19 17:02
本发明专利技术涉及一种可穿戴手语手势识别系统及方法。本发明专利技术手套本体的指尖位置设置有电子罗盘模块以采集手指间角度信息,手指位置设置了弯曲度传感器模块,手背位置设置了手掌姿态检测模块;主控模块分别与电子罗盘模块、弯曲度传感器模块、手掌姿态检测模块、语音模块和通信模块连接;主控模块将各个传感器采样一次汇总的数据,作为一帧数据,通过通信模块发送给上位机;并通过上位机将该数据与数据库中语义进行匹配,并将匹配结果通过通信模块发送给主控模块,主控模块通过语音模块对匹配结果进行语音播报。同时提出一种识别方法,可降低系统功耗、提高系统续航时间、并提高识别准确度,系统将采集到的数据通过所提出的手语手势识别方法进行识别。别方法进行识别。别方法进行识别。

【技术实现步骤摘要】
一种可穿戴手语手势识别系统及方法


[0001]本专利技术涉及手语手势识别
,尤其涉及一种可穿戴手语手势识别系统及方法。

技术介绍

[0002]随着电子和计算机技术的飞速发展,人工智能在人们生活中扮演的角色越来越重要,在全球疫情的背景下,非接触式的人机交互也变得越来越不可或缺,智能家具、智能医疗等领域也实现了突飞猛进的发展,而基于手势控制的系统,在其中也起到了关键的作用。同时,手语翻译在我国已经作为一种职业进行推广,服务于听障群体,但由于相关教育资源没有得到足够的重视和保障,师资力量的薄弱,导致手语翻译员紧缺,听障人群的在社会中的正常生活容易受到影响。由于听力受损所带来的沟通交流的不便,经常会给听障群体融入社会带来困难,手语识别作为一种多学科融合的研究,囊括了概率统计,数理计算,模式识别,计算机科学和自然语言处理等多个学科,通过对人手姿态和动作的分析,转化为特定的含义,从理论上推动了前沿科学技术的进步,也使科学技术能够更好的走进人们的生活,为人类服务。
[0003]在实际应用中,手语手势分类主要包括基于视觉图像的手语手势识别和基于传本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种可穿戴手语手势识别系统,其特征在于:包括手套本体,在手套本体的指尖位置设置有电子罗盘模块,手指位置设置弯曲度传感器模块,手背位置设置了手掌姿态检测模块、主控模块、电源管理模块、语音模块、通信模块和上位机;电子罗盘模块与弯曲度传感器模块相连接,并通过弯曲度传感器模块与主控模块相连接,弯曲度传感器模块、手掌姿态检测模块、语音模块和通信模块都与主控模块直接相连,电源管理模块与各个模块相连接,通过电源管理模块给各个模块供电;所述电子罗盘模块包括六轴姿态传感器,用于对手指之间的夹角信息进行采集;所述弯曲度传感器模块包括弯曲度传感器,用于对手指的弯曲角度信息进行采集;所述手掌姿态检测模块包括九轴姿态传感器,用于对手掌的姿态信息进行采集;所述主控模块包括一个STM32单片机,单片机将采集到的5个弯曲度传感器信号通过A/D转换后进行存储;将电子罗盘中磁力计数据经过加速度计校准修正后,读出手指航偏角,计算相邻手指的角度差并进行存储;将九轴姿态传感器中陀螺仪的数据经过加速度计和磁力计校准后,再通过运算,转化为四元数进行存储;最后将各个传感器采样一次汇总的数据,作为一帧数据,通过通信模块发送给上位机;上位机将该数据与数据库中语义进行匹配,并将匹配结果通过通信模块发送给主控模块,主控模块通过语音模块对匹配结果进行语音播报;所述通信模块为低功耗蓝牙模块,与单片机通过串口相连接。2.如权利要求1所述的可穿戴手语手势识别系统,其特征在于:所述的电源管理模块为包括锂电池、稳压电路和升/降压电路。3.基于权利1所述的可穿戴手语手势识别系统的手语手势识别方法,其特征在于:具体包括如下步骤:将手套戴在使用者手上,将电子罗盘模块置于指尖背部,将弯曲度传感器...

【专利技术属性】
技术研发人员:白茹寇传嘉谢鑫杨腾达李博彦
申请(专利权)人:杭州电子科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1