一种基于弯曲传感器的手势识别装置和手语翻译方法制造方法及图纸

本发明专利技术公开了一种基于弯曲传感器的手势识别装置，包括：微处理器一、微处理器二，以及分别与微处理器一相连的弯曲传感器一、九轴姿态传感器一和无线通信模块一，分别于微处理器二相连的无线通信模块二、显示模块、SD卡模块和网络模块，微处理器一通过串行输入输出口将发送缓存由无线通信模块一发送给与无线通信模块二，由无线通信模块二将接收缓存通过串行输入输出口传输给微处理器二。本发明专利技术提供的基于弯曲传感器的手势识别装置不需要光学设备的辅助，而是采用弯曲传感器和姿态传感器进行手势识别，能够替代现有的手语识别方式，在一定程度上精简了手语识别系统算法的复杂性。

【技术实现步骤摘要】

本专利技术涉及手语动作识别装置和手语翻译方法领域，特别涉及一种基于弯曲传感器的手势识别装置和手语翻译方法。
技术介绍
据资料统计说明，我国听力语言残疾居视力残疾、肢残、智残等五大残疾之首，超过2000万人，我国聋哑症的发病率约为2‰，按年均人口出生率计算，连同出生后2～3岁婴幼儿，每年总的群体达5700万，听损伤的发病人数约为17万。我国每年有2000万新生儿出生，约有3万听力损害的新生儿出现。在这样一种情形之下，我们希望能够研发一种便携式的手势识别装置与手语翻译设备。研究发现，现有的手语翻译方案，有来自微软公司的US20100199228A1(公开日为2010年8月5日)提供了利用深度摄像头捕获并分析用户的身体姿态并将其解释为命令的方案，来Nintendo公司的US20080291160A1(公开日为2008年11月27日)提供了利用红外传感器和加速度传感器捕获用户手部位置的方案。这些方案实现了对手部运动的识别，但也存在着各种不足，而且价格昂贵。
技术实现思路
本专利技术的目的在于克服现有技术的缺点与不足，提供一种基于弯曲传感器的手势识别装置和手语翻译方法。本专利技术的目的通过如下技术方案实现：一种基于弯曲传感器的手势识别装置，包括：微处理器一、微处理器二，以及分别与微处理器一相连的弯曲传感器一、九轴姿态传感器一和无线通信模块一，分别于微处理器二相连的无线通信模块二、显示模块、SD卡模块和网络模块，微处理器一与微处理器二之间选用蓝牙4.0BLE模块作为近场通信无线通信方式，微处理器一通过串行输入输出口将发送缓存由无线通信模块一发送给与无线通信模块二，由无线通信模块二将接收缓存通过串行输入输出口传输给微处理器二。所述弯曲传感器一随着使用者手指弯曲度的改变而改变自身弯曲度，并转换成模拟电流信号，输入到微处理器一的AD输入输出口。所述九轴姿态传感器一随着使用者双手手心平移、旋转和双手相对位置的变化而改变自身加速度、旋转角和磁场强度参数，并通过串行总线将信息传输到微处理器一。所述微处理器一以一预先设置的采样率，开始记录使用者单位时间内的手部手指弯曲度、手掌加速度、旋转角和磁场参数，存入发送缓存，直到读取到特定的语句结束动作。微处理器二将接收缓存经过数据封装，通过网络模块发送给后台服务器，数据由后台服务器根据选定的翻译语言，以特定的算法进行匹配；后台服务器将匹配好的翻译语言转换成通用文字编码，回传给微处理器二，微处理器二通过显示模块将文字显示在TFT-LCD显示屏上。一种基于弯曲传感器的手语翻译方法，包含以下顺序的步骤：S1.使用者将手势识别装置佩戴在双手上，进行手语交流，以特定的动作标志语句的开始和结束；S2.每只手上佩戴的手势识别装置，有5个弯曲传感器一，分别固定在使用者手指背部，并连接到微处理器一的AD模拟信号转数字信号输入输出口，所述弯曲传感器一随着使用者手指弯曲度的改变而改变自身弯曲度，并转换成模拟电流信号，输入到微处理器一的AD输入输出口。S3.每只手上佩戴的手势识别装置，有一个九轴姿态传感器一，固定在使用者手掌中心，并通过串行总线连接到微处理器一的输入输出口，所述九轴姿态传感器一随着使用者双手手心平移、旋转和双手相对位置的变化而改变自身加速度、旋转角和磁场强度参数，微处理器一以预先设定的时间间隔读取九轴姿态传感器一的参数。S4.当微处理器一读取到特定的语句开始动作，开始记录使用者单位时间内的手部手指弯曲度、手掌加速度、旋转角和磁场参数，存入发送缓存，直到读取到特定的语句结束动作。S5.微处理器一通过串行输入输出口将发送缓存由无线通信模块一发送给与无线通信模块二，由无线通信模块二将接收缓存通过串行输入输出口传输给微处理器二。S6.微处理器二将接收缓存经过数据封装，通过网络模块发送给后台服务器，数据由后台服务器根据选定的翻译语言，以特定的算法进行匹配。S7.后台服务器将匹配好的翻译语言转换成通用文字编码，回传给微处理器二，微处理器二通过显示模块将文字显示在TFT-LCD显示屏上。S8.使用者可以根据显示结果，用特定手势对结果进行删除、清屏和保存等操作。步骤S2中，所述的手势识别装置以轻质手套的形式将弯曲传感器一固定在使用者手指背部。步骤S3中，所述的九轴姿态传感器是一种具有多自由度的传感器，用于检测在空间中的3个加速度自由度、3个旋转角自由度以及3个磁场强度自由度。步骤S6中，所述的网络模块为有线以太网模块或者无线WIFI网络模块。本专利技术与现有技术相比，具有如下优点和有益效果：1、本专利技术提供的基于弯曲传感器的手势识别装置不需要光学设备的辅助，而是采用弯曲传感器和姿态传感器进行手势识别，能够替代现有的手语识别方式，在一定程度上精简了手语识别系统算法的复杂性。2、本专利技术提供的基于弯曲传感器的手势识别装置可是通过双手同时佩戴来实现对双手的手势同时进行识别，对手语动作进行精确识别。3、本专利技术提供的一种基于弯曲传感器的手语翻译方法将手势信息的翻译放置到计算能力强大的后台服务器，方便词库扩充和算法优化等操作，具备一定的灵活性。4、本专利技术利用通过蓝牙模块实现手势动作捕捉部分和显示部分的传输，为手机、平板电脑等便携电子设备预留了通信接口，方便以后装置的平台延伸。附图说明图1为本专利技术所述的一种基于弯曲传感器的手势识别装置的工作原理图。图2为本专利技术所述的一种基于弯曲传感器的手语翻译方法的流程图。具体实施方式下面结合实施例及附图对本专利技术作进一步详细的描述，但本专利技术的实施方式不限于此。如图1，一种基于弯曲传感器的手势识别装置，所述装置包括：微处理器一、微处理器二，以及分别与微处理器一相连的弯曲传感器一、九轴姿态传感器一和无线通信模块一，分别于微处理器二相连的无线通信模块二、显示模块、SD卡模块和网络模块。所述的微处理器一为STM32L051低功耗单片机，所述的弯曲传感器一为FLEXSENSOR无记忆弯曲传感器，所述的九轴姿态传感器一为MPU-9250传感器，所述的无线通信模块一为蓝牙4.0BLE模块。所述的微处理器二为STM32F103高性能单片机，所述的无线通信模块二为蓝牙4.0BLE模块，所述的显示模块为TFT-LCD显示屏，所述的SD卡模块为MicroSD卡存储模块。STM32系列单片机是基于专为要求高性能、低成本、低功耗的嵌入式应用专门设计的ARMCortex-M3内核单片机，时钟频率达到72MHz，是同类产品中性能最高的产品，具有2个12位模数转换器，1μs转换本文档来自技高网...

【技术保护点】
一种基于弯曲传感器的手势识别装置，其特征在于包括：微处理器一、微处理器二，以及分别与微处理器一相连的弯曲传感器一、九轴姿态传感器一和无线通信模块一，分别于微处理器二相连的无线通信模块二、显示模块、SD卡模块和网络模块，微处理器一通过串行输入输出口将发送缓存由无线通信模块一发送给与无线通信模块二，由无线通信模块二将接收缓存通过串行输入输出口传输给微处理器二。

【技术特征摘要】
1.一种基于弯曲传感器的手势识别装置，其特征在于包括：微处理器一、微处理器二，
以及分别与微处理器一相连的弯曲传感器一、九轴姿态传感器一和无线通信模块一，分别于
微处理器二相连的无线通信模块二、显示模块、SD卡模块和网络模块，微处理器一通过串行
输入输出口将发送缓存由无线通信模块一发送给与无线通信模块二，由无线通信模块二将接
收缓存通过串行输入输出口传输给微处理器二。
2.根据权利要求1所述的基于弯曲传感器的手势识别装置，其特征在于微处理器一与微
处理器二之间选用蓝牙4.0BLE模块作为近场通信无线通信方式。
3.根据权利要求1所述的基于弯曲传感器的手势识别装置，其特征在于所述弯曲传感器
一随着使用者手指弯曲度的改变而改变自身弯曲度，并转换成模拟电流信号，输入到微处理
器一的AD输入输出口。
4.根据权利要求1所述的基于弯曲传感器的手势识别装置，其特征在于所述九轴姿态传
感器一随着使用者双手手心平移、旋转和双手相对位置的变化而改变自身加速度、旋转角和
磁场强度参数，并通过串行总线将信息传输到微处理器一。
5.根据权利要求1所述的基于弯曲传感器的手势识别装置，其特征在于所述微处理器一
以一预先设置的采样率，开始记录使用者单位时间内的手部手指弯曲度、手掌加速度、旋转
角和磁场参数，存入发送缓存，直到读取到特定的语句结束动作。
6.根据权利要求1所述的基于弯曲传感器的手势识别装置，其特征在于微处理器二将接
收缓存经过数据封装，通过网络模块发送给后台服务器，数据由后台服务器根据选定的翻译
语言，以特定的算法进行匹配；后台服务器将匹配好的翻译语言转换成通用文字编码，回传
给微处理器二，微处理器二通过显示模块将文字显示在TFT-LCD显示屏上。
7.一种基于弯曲传感器的手语翻译方法，其特征在于包含以下步骤：
S1.使用者将手势识别装置佩戴在双手上，进行手语交流，以特定的动作标志语句的开
始和结束；
S2.每只手上佩戴的手势识别装置，有5个弯曲传感器一，...

【专利技术属性】
技术研发人员：曾明，蔡健鹏，叶杰炜，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东;44