当前位置: 首页 > 专利查询>戚明海专利>正文

一种手语识别翻译装置制造方法及图纸

技术编号:14746964 阅读:65 留言:0更新日期:2017-03-01 23:31
本发明专利技术公开了一种手语识别翻译装置,包括翻译装置本体,所述翻译装置本体的侧壁上安装有摄像头,所述翻译装置本体通过电导体连接有动作识别装置,所述本体的内部设有单片机模块,且单片机模块通过电导体与摄像头和动作识别装置连接,所述单片机模块通过电导体连接有视频分析模块、语音芯片模块、供电模块和手语学习模块。本发明专利技术通过摄像头来拍摄交流者作出的手势,将拍摄到的图像进行解码,并且通过视频分析模块进行分析,并且通过动作识别装置,对交流者的手势进行分析,再将两者相结合,可以更加精确的进行手语识别翻译,并且进行播报,更加方便与聋哑人士进行交流。

【技术实现步骤摘要】

本专利技术涉及手语翻译装置
,具体为一种手语识别翻译装置
技术介绍
通常正常人与聋哑人士沟通时需要学习一套手语,手语的学习需要花费相当大的精力及相当长的时间。另外,大多数手语的表达方式因国籍或地区的不同而不同,故不同国籍或地区的聋哑人士相互进行交流也存在沟通的问题,但是现有的手语翻译装置往往识别的效果不是很精确,针对上述问题,特提出一种手语识别翻译装置。
技术实现思路
本专利技术的目的在于提供一种手语识别翻译装置,以解决上述
技术介绍
中提出的问题。为实现上述目的,本专利技术提供如下技术方案:一种手语识别翻译装置,包括翻译装置本体,所述翻译装置本体的侧壁上安装有摄像头,所述翻译装置本体通过电导体连接有动作识别装置,所述本体的内部设有单片机模块,且单片机模块通过电导体与摄像头和动作识别装置连接,所述单片机模块通过电导体连接有视频分析模块、语音芯片模块、供电模块和手语学习模块。优选的,所述视频分析模块包括依次电连接的视频接收模块、信号转换模块、高速DSP模块、视频解码模块、数据采集模块、特征提取模块和识别模块,所述特征提取模块通过电导体连接有训练模块,且训练模块通过电导体与识别模块电连接。优选的,所述手语学习模块包括手语资料库模块、手势库管理模块和用户登录及管理模块。优选的,所述手势库管理模块包括手势增添模块、手势库替换模块和手势库删除模块。优选的,所述动作识别装置内部设有动作传感模块和加速度传感模块,且动作传感模块和加速度传感模块通过电导体与单片机模块电连接。优选的,所述供电模块通过电导体连接有电压检测模块,且供电模块与电压检测模块间的电连接方式为双向电连接。优选的,所述单片机模块通过电导体连接有无线通讯模块。优选的,所述无线通讯模块采用的通讯方式为WIFI传输。优选的,所述无线通讯模块采用的通讯方式为Zigbee传输。与现有技术相比,本专利技术的有益效果是:一种手语识别翻译装置,通过摄像头来拍摄交流者做出的手势,将拍摄到的图像进行解码,并且通过视频分析模块进行分析,并且通过动作识别装置,对交流者的手势进行分析,再将两者相结合,可以更加精确的进行手语识别翻译,并且进行播报,更加方便与聋哑人士进行交流。附图说明图1为本专利技术的结构示意图;图2为本专利技术的结构框图;图3为本专利技术中视频分析模块的结构框图;图4为本专利技术中手势库管理模块的结构框图;图5为本专利技术中动作传感模块的结构框图;图6为本专利技术中语音芯片模块的结构框图。图中:1、翻译装置本体,2、摄像头,3、动作识别装置。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本专利技术保护的范围。请参阅图1-6,本专利技术提供的第一种技术方案:一种手语识别翻译装置,包括翻译装置本体1,所述翻译装置本体1的侧壁上安装有摄像头2,所述翻译装置本体1通过电导体连接有动作识别装置3,所述本体1的内部设有单片机模块,且单片机模块通过电导体与摄像头2和动作识别装置3连接,所述单片机模块通过电导体连接有视频分析模块、语音芯片模块、供电模块和手语学习模块,所述视频分析模块包括依次电连接的视频接收模块、信号转换模块、高速DSP模块、视频解码模块、数据采集模块、特征提取模块和识别模块,所述特征提取模块通过电导体连接有训练模块,且训练模块通过电导体与识别模块电连接,所述手语学习模块包括手语资料库模块、手势库管理模块和用户登录及管理模块,所述手势库管理模块包括手势增添模块、手势库替换模块和手势库删除模块,所述动作识别装置3内部设有动作传感模块和加速度传感模块,且动作传感模块和加速度传感模块通过电导体与单片机模块电连接,通过摄像头2来拍摄交流者做出的手势,并且通过动作识别装置3,对交流者的手势进行分析,再将两者相结合,可以更加精确的进行手语识别翻译,并且进行播报,更加方便与聋哑人士进行交流,所述供电模块通过电导体连接有电压检测模块,且供电模块与电压检测模块间的电连接方式为双向电连接,可以对供电模块的实时电压进行检测,防止过电压异常工作,所述单片机模块通过电导体连接有无线通讯模块,所述无线通讯模块采用的通讯方式为WIFI传输,可以与外界的移动设备进行数据传输。本专利技术第一种实施例的工作原理:通过摄像头2来拍摄交流者做出的手势,并且将拍摄到的图像输送到视频分析模块内,通过视频分析模块中的信号转换模块将图像进行转换,转换后通过高速DSP模块进行处理,使用视频解码模块将视频进行解码,特征采集模块将必要的特征进行提取,通过训练模块进行处理,训练模块使用的是半连续的HMM模型,选取从中国字典中去掉与表情、口型有关词语以及“手势同义词”后剩余的4000多个手语词汇集的子集,首先对模型进行初始化,模型库建好后,通过识别模块开始识别,将待识别的手语词与模型库中的每一个手语词模型进行计算,使用前向后向算法来计算待识别的手语数据与模型的匹配程度,并且通过动作识别装置3中动作传感模块来判断手指是否弯曲,并且通过加速度传感模块来判断手的移动状态,对交流者的手势进行分析,再将两者的判断相结合,可以更加精确的进行手语识别翻译,并且通过语音芯片模块进行播报,也可以使用WIFI通讯方式,令移动设备进行播报,更加方便与聋哑人士进行交流,通过手语学习模块中的用户登录及管理模块进行登录,使用手语资料库模块来存储手语动作,便于使用者学习,而且可以使用手势库管理模块对储存的手势进行增添、替换和删除。请参阅图1-6,本专利技术提供的第二种技术方案:一种手语识别翻译装置,包括翻译装置本体1,所述翻译装置本体1的侧壁上安装有摄像头2,所述翻译装置本体1通过电导体连接有动作识别装置3,所述本体1的内部设有单片机模块,且单片机模块通过电导体与摄像头2和动作识别装置3连接,所述单片机模块通过电导体连接有视频分析模块、语音芯片模块、供电模块和手语学习模块,所述视频分析模块包括依次电连接的视频接收模块、信号转换模块、高速DSP模块、视频解码模块、数据采集模块、特征提取模块和识别模块,所述特征提取模块通过电导体连接有训练模块,且训练模块通过电导体与识别模块电连接,所述手语学习模块包括手语资料库模块、手势库管理模块和用户登录及管理模块,所述手势库管理模块包括手势增添模块、手势库替换模块和手势库删除模块,所述动作识别装置3内部设有动作传感模块和加速度传感模块,且动作传感模块和加速度传感模块通过电导体与单片机模块电连接,通过摄像头2来拍摄交流者做出的手势,并且通过动作识别装置3,对交流者的手势进行分析,再将两者相结合,可以更加精确的进行手语识别翻译,并且进行播报,更加方便与聋哑人士进行交流,所述供电模块通过电导体连接有电压检测模块,且供电模块与电压检测模块间的电连接方式为双向电连接,可以对供电模块的实时电压进行检测,防止过电压异常工作,所述单片机模块通过电导体连接有无线通讯模块,所述无线通讯模块采用的通讯方式为WIFI传输,可以与外界的移动设备进行数据传输。本专利技术第二种实施例的工作原理:通过摄像头2来拍摄交流者做出的手势,并且将拍摄到的图像输送到视频分析模块内,通过视频分析本文档来自技高网...
一种手语识别翻译装置

【技术保护点】
一种手语识别翻译装置,包括翻译装置本体(1),其特征在于:所述翻译装置本体(1)的侧壁上安装有摄像头(2),所述翻译装置本体(1)通过电导体连接有动作识别装置(3),所述本体(1)的内部设有单片机模块,且单片机模块通过电导体与摄像头(2)和动作识别装置(3)连接,所述单片机模块通过电导体连接有视频分析模块、语音芯片模块、供电模块和手语学习模块。

【技术特征摘要】
1.一种手语识别翻译装置,包括翻译装置本体(1),其特征在于:所述翻译装置本体(1)的侧壁上安装有摄像头(2),所述翻译装置本体(1)通过电导体连接有动作识别装置(3),所述本体(1)的内部设有单片机模块,且单片机模块通过电导体与摄像头(2)和动作识别装置(3)连接,所述单片机模块通过电导体连接有视频分析模块、语音芯片模块、供电模块和手语学习模块。2.根据权利要求1所述的一种手语识别翻译装置,其特征在于:所述视频分析模块包括依次电连接的视频接收模块、信号转换模块、高速DSP模块、视频解码模块、数据采集模块、特征提取模块和识别模块,所述特征提取模块通过电导体连接有训练模块,且训练模块通过电导体与识别模块电连接。3.根据权利要求1所述的一种手语识别翻译装置,其特征在于:所述手语学习模块包括手语资料库模块、手势库管理模块和用户登录及管理模块。4.根据权利...

【专利技术属性】
技术研发人员:戚明海
申请(专利权)人:戚明海
类型:发明
国别省市:江苏;32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1