一种神经网络实时手语翻译系统设备技术方案

一种神经网络实时手语翻译系统设备属于手语翻译技术领域，本发明专利技术能够将设备使用者所做出的手语动作实时翻译成书面文字并显示在手机APP上，用来帮助聋哑人降低与人们交流的难度。本发明专利技术包括主控模块、手势模块、通信模块和终端模块。主控模块用于采集来自手势模块的信号，经神经网络手语识别算法处理后，通过通信模块将信号传递给终端模块；手势模块用于采集设备使用者的手语动作数据，由采集手指弯曲时数据的弯曲传感器和检测手掌朝向的MPU6050芯片模块两部分组成，通过连接电路与主控模块相连；通信模块采用半双工工作的HC‑05蓝牙模块，通过UART接口与主控模块的I/O口相连，作为数据传输通道；终端模块采用具有蓝牙功能的手机端App的形式，通过通信模块接收经主控模块处理过的信号，得到最终的识别翻译结果以书面文字的形式显示在手机屏幕上。

【技术实现步骤摘要】
一种神经网络实时手语翻译系统设备
本专利技术专利属于手语翻译
，特别涉及一种神经网络实时手语翻译系统设备。
技术介绍
据近些年统计，我国有超过2000万人存在听力障碍，放眼到全球这一数字则扩大到大约7000万人，近些年来国内外相关科研工作者投入了大量时间来攻克手语识别
所存在的不足与挑战，科研工作者们曾研究过诸如数据手套或特殊摄像头这样的输入传感器潜在的发展空间，虽然前者在识别方面表现很好，但因为难以穿戴和过于昂贵很难投入广泛使用。而网络摄像头或立体摄像头虽然能够保证追踪手部运动的精度和速度，却很难处理好复杂背景和光照。
技术实现思路
本专利技术提供一种神经网络实时手语翻译系统设备，能够将设备使用者做出的手语动作实时翻译成书面文字并显示在手机APP上，用来帮助聋哑人降低与人们交流的难度。本专利技术解决上述技术问题的技术方案如下：一种神经网络实时手语翻译系统设备，包括主控模块、手势模块、通信模块和终端模块：所述主控模块用于采集来自手势模块的信号，经神经网络手语识别算法处理后，通过通信模块将信号传递给本文档来自技高网...

【技术保护点】
1.一种神经网络实时手语翻译系统设备，其特征在于，包括主控模块、手势模块、通信模块以及终端模块；/n所述主控模块即微控制器，用于采集来自手势模块的信号，经过处理后通过通信模块将信号传递给终端模块；/n所述手势模块用于采集手语动作数据，所述手势模块分为两部分：采集手指弯曲时数据的弯曲传感器以及检测手掌朝向的MPU6050芯片模块，通过连接电路与主控模块相连；/n所述通信模块采用HC-05蓝牙模块，通过串口与主控模块相连，作为数据传输通道；/n所述终端模块采用手机端APP的形式，通过通信模块接收来自主控模块的最终识别翻译结果。/n

【技术特征摘要】
1.一种神经网络实时手语翻译系统设备，其特征在于，包括主控模块、手势模块、通信模块以及终端模块；
所述主控模块即微控制器，用于采集来自手势模块的信号，经过处理后通过通信模块将信号传递给终端模块；
所述手势模块用于采集手语动作数据，所述手势模块分为两部分：采集手指弯曲时数据的弯曲传感器以及检测手掌朝向的MPU6050芯片模块，通过连接电路与主控模块相连；
所述通信模块采用HC-05蓝牙模块，通过串口与主控模块相连，作为数据传输通道；
所述终端模块采用手机端APP的形式，通过通信模块接收来自主控模块的最终识别翻译结果。


2.根据权利要求1所述的一种神经网络实时手语翻译系统设备，其特征在于，所述主控模块使用I.MAX6ULL芯片，采用基于神经网络的手语识别算法；所述I.MAX6ULL芯片配备ARMCortex-A7内核，采用12位ADC转换器；
所述手势模块分为检测手掌朝向的MPU6050芯片模块以及用来采集手指弯曲时的数据的弯曲传感器；所述MPU6050芯片模块整合了六轴加速度计与陀螺仪，是一种整合性六轴运动处理组件；所述弯曲传感器分为多个分布在每个手指，通过连接电路与主控模块相连，手指的弯曲引起弯曲传感器作用，通过放大电路和ADC转换将其转为电压信号输出；
所述通信模块使用HC-05蓝牙模块，所述HC-05蓝牙模块通过串口接口与所述主控模块连接，所述HC-05蓝牙...

【专利技术属性】
技术研发人员：蔡向东，朱思旭，
申请(专利权)人：哈尔滨理工大学，
类型：发明
国别省市：黑龙江;23