一种双模式聋哑人交流设备制造技术

本发明专利技术公开一种双模式聋哑人交流设备，包括手势识别组件、聋哑人信息处理组件、正常人信息处理组件、显示器和智能眼镜，所述手势识别组件与聋哑人信息处理组件连接，聋哑人信息处理组件与显示器连接，正常人信息处理组件与显示器连接，智能眼镜与正常人信息处理组件通过WiFi传输信息。本发明专利技术具备两种不同的应用模式，第一种模式被采用于企业、服务机构和公共机构等场所如飞机场、社区服务机构等为聋哑人服务；第二种模式是可被聋哑人自身携带佩戴在身上，并自主使用于生活的各个场合；本发明专利技术的使用形式和技术达到全面考虑以及多样化创新。

【技术实现步骤摘要】
一种双模式聋哑人交流设备
本专利技术涉及残疾人交流设备
，特别涉及一种双模式聋哑人交流设备。
技术介绍
聋哑人无法像正常人一样交流沟通，造成了他们工作、学习、娱乐、就医、维权等生活状态的混乱，许多低文化聋哑人甚至面临生存的危机，更使一些人在困窘与寂寞中走上了违法犯罪的道路。标准化手语在各种残疾人机构中开展普及，越来越多的聋哑人会使用标准的手语与别人进行交流。聋哑人与聋哑人之间主要交流方式是使用手语，而聋哑人与普通人常用的交流方式是使用纸和笔进行写字交流、使用手机打字进行交流、或者使用手语，而使用纸笔和手机打字的交流效率会很低，大多普通人也看不懂手语，因此聋哑人与普通人之间的交流存在很多不方便的问题。目前，在手语识别方面主要使用肌电手环、数据手套以及图像传感识别这三种方式。肌电手环的手语识别系统，是基于聋哑人比划的手势动作，捕捉肌肉产生的肌电电流作为主要信息，转换成普通人能理解的语音或者文字信息，这种方式的缺点是肌电信号的捕捉对手臂佩戴的部位有所要求，并且由于是接触式的，容易受到皮肤分泌的汗水的干扰而导致识别不准确；数据手套的手语识别系统，是基于手套内部的位置跟踪仪以及陀螺仪等设备，跟踪和测量手势动作在空间中相对的位置以及旋转角度等轨迹信息，并翻译成普通人能懂的语音或者文本信息，这种方式的缺点是聋哑人需要把包裹性的手套佩戴在手上，佩戴手套的时间贯穿使用者的大部分时间，由于是大面积接触式的手套，长期的佩戴对使用者的手部会有疲劳、不适或者做其它要触碰到水的操作是不方便的；图像传感的手语识别系统，是利用图像捕捉或者手势捕捉模块捕捉手语手势，并利用处理器对其进行处理、分析和转换，图像传感相对前两种识别方式的优点是使用者不必佩戴手部的信息采集部件。
技术实现思路
本专利技术的目的在于克服现有技术的不足，提供一种双模式聋哑人交流设备，该设备可根据主体使用者和使用目的不同而具备两种使用模式，使用者不必佩戴手部的信息采集部件。本专利技术的技术方案为：一种双模式聋哑人交流设备，包括手势识别组件、聋哑人信息处理组件、正常人信息处理组件、显示器和智能眼镜，所述手势识别组件与聋哑人信息处理组件连接，聋哑人信息处理组件与显示器连接，正常人信息处理组件与显示器连接，智能眼镜与正常人信息处理组件通过WiFi传输信息。其中，手势识别组件识别聋哑人的手势信息，把所捕捉到的手势信息转换为电信号传输到聋哑人信息处理组件，聋哑人信息处理组件根据接收到的电信号转换为相对应的声音或者图像，其中图像信息传输到显示器中，显示器用来显示聋哑人手语对应的文字信息；正常人信息处理组件采集正常人的语音信息，将输入的语音信息翻译为文本信息在显示器中显示，同时智能眼镜由聋哑人佩戴，智能眼镜将所接收到的文本信息进行显示，便于聋哑人接收信息。所述手势识别组件包括手势识别感应器、手势处理转换器和数据传输链，手势识别感应器与手势处理转换器相连，手势处理转换器通过数据传输链连接聋哑人信息处理组件。其中，手势识别感应器用于识别聋哑人的手语动作并发送至手势处理转换器，手势处理转换器将手语动作转换为电信号，通过数据传输连发送至聋哑人信息处理组件。所述聋哑人信息处理组件包括图像处理器、图像-文本转换器和语音合成器，图像处理器与手势识别组件连接，图像处理器和语音合成器均与图像-文本转换器连接，图像-文本转换器还与显示器连接。其中，图像处理器接收到手势识别组件传输的电信号，通过图像-文本转换器转换为文字信息，语音合成器通过声音向外传输，同时还通过显示器显示文字图像，聋哑人的手势动作信息通过语音和图像传递给正常人。所述语音合成器外接扬声器。语音合成器将文字信息转换成语音信息，并通过扬声器传送到外界。所述正常人信息处理组件包括依次连接的语音采集器、语音处理器、词库缓存器和语音-文本转换器，词库缓存器包括本地词库缓存器和云端词库缓存器。其中，正常人的语音信息通过语音处理器和语音-文本转换器转换为文字信息，词库缓存器用于辅助识别语音和转换文字。所述语音采集器外接麦克风。其中，麦克风用于采集正常人的语音信息，并发送至语音处理器。所述正常人信息处理组件还包括WiFi信息传输器，WiFi信息传输器与语音-文本转换器连接。WiFi信息传输器用于将语音-文本转换器产生的文字信息无线传输到智能眼镜中。所述智能眼镜包括智能眼镜显示器、光学组件和眼镜架，眼镜架包括两侧的眼镜腿和前方镜架，所述智能眼镜显示器安装于其中一个眼镜腿上，光学组件安装在前方镜架上，光学组件位于智能眼镜显示器的前方。其中，光学组件用于光传导图像信息，智能眼镜显示器用于显示文字信息。所述光学组件包括反射镜和分光镜，智能眼镜显示器的图像通过反射镜反射到分光镜上，分光镜将信息反射到眼睛。其中，分光镜的中心与使用者的眼睛中心成同一水平线，反射镜的距离折算后使得聋哑人能清楚的看到投影在分光镜上的文字信息；其光学成像原理是利用光的反射原理，将与眼镜腿同轴的显示屏幕上的信息通过反射镜90°反射到眼睛前方的分光镜处，分光镜再次经过90°反射，将成像信息反射到眼睛内部。所述眼镜架上还安装智能眼镜WiFi模块和文字信息像素点编码模块，智能眼镜WiFi模块和文字信息像素点编码模块连接，智能眼镜WiFi模块接收正常人信息组件传输的信息，文字信息像素点编码模块与智能眼镜显示器连接。本专利技术相对于现有技术，具有以下有益效果：本双模式聋哑人交流设备具备两种不同的应用模式，第一种模式被采用于企业、服务机构和公共机构等场所如飞机场、社区服务机构等为聋哑人服务，主体是机构或企业，客体是聋哑人，聋哑人可以不用自己购买或配备此专利技术设备；第二种模式是可被聋哑人自身携带佩戴在身上，并自主使用于生活的各个场合，主体是聋哑人，客体是正常人；本专利技术的使用形式和技术达到全面考虑以及多样化创新。本双模式聋哑人交流设备，区别于现有的手机APP显示信息、平板电脑或者其它设备显示信息，本专利技术的智能眼镜的显示形式可以让聋哑人与正常人平视交流，不需要低头看手机或者其它设备，交流双方在使用本设备时有更好的心理感受和舒适度。本专利技术能让聋哑人与正常人无障碍交流的条件覆盖范围更广，交流设备可以非必须聋哑人自身配备或者聋哑人自身可以配备，使用形式多样。本专利技术能够将聋哑人的手语动作转换为语音和文字信息，文字信息显示在外部显示屏上以供正常人看；将正常人的语音信息转换为文字信息，文字信息通过WiFi信息传输器传送到智能眼镜WiFi模块上，并通过文字信息像素点编码模块转换成文字图像信息，经过反射镜最后呈现在分光镜上，以供聋哑人在与正常人面对面沟通的时候不需要低头看手机或者另外显示器就能知晓正常人要表达的信息，使聋哑人与普通人平等地、感到自尊地以及方便地进行交流。附图说明图1为本一种双模式聋哑人交流设备的结构示意图。图2为本双模式聋哑人交流设备被企业或者公共机构所用时的工作逻辑图。图3为本双模式聋哑人交流设备被聋哑人所用时的工作逻辑图。图4为智能眼镜的光学原理图。其中，图中所示，1为手势识别组件、2为图像处理器、3为图像-文本转换器、41为语音合成器、42为显示器、5为语音采集器、6为语音处理器、71为云端词库缓存器、72为本地词库缓存器、8为语音-文本转换器、9为WiFi信息传输器、10为智能眼镜WiFi模块、11本文档来自技高网...

【技术保护点】
1.一种双模式聋哑人交流设备，其特征在于，包括手势识别组件、聋哑人信息处理组件、正常人信息处理组件、显示器和智能眼镜，所述手势识别组件与聋哑人信息处理组件连接，聋哑人信息处理组件与显示器连接，正常人信息处理组件与显示器连接，智能眼镜与正常人信息处理组件通过WiFi传输信息。

【技术特征摘要】
1.一种双模式聋哑人交流设备，其特征在于，包括手势识别组件、聋哑人信息处理组件、正常人信息处理组件、显示器和智能眼镜，所述手势识别组件与聋哑人信息处理组件连接，聋哑人信息处理组件与显示器连接，正常人信息处理组件与显示器连接，智能眼镜与正常人信息处理组件通过WiFi传输信息。2.根据权利要求1所述一种双模式聋哑人交流设备，其特征在于，所述手势识别组件包括手势识别感应器、手势处理转换器和数据传输链，手势识别感应器与手势处理转换器相连，手势处理转换器通过数据传输链连接聋哑人信息处理组件。3.根据权利要求1所述一种双模式聋哑人交流设备，其特征在于，所述聋哑人信息处理组件包括图像处理器、图像-文本转换器和语音合成器，图像处理器与手势识别组件连接，图像处理器和语音合成器均与图像-文本转换器连接，图像-文本转换器还与显示器连接。4.根据权利要求3所述一种双模式聋哑人交流设备，其特征在于，所述语音合成器外接扬声器。5.根据权利要求1所述一种双模式聋哑人交流设备，其特征在于，所述正常人信息处理组件包括依次连接的语音采集器、语音处理器、词库缓存器和语音-文本转换器，...

【专利技术属性】
技术研发人员：陈亮，刘昌贵，高育育，黄晋涛，裴哲慧，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：广东,44