一种聋人提示系统、方法及智能手机技术方案

本发明专利技术涉及一种聋人提示系统、方法及智能手机，该系统包括用户交互模块，用于聋人与系统之间的交互；场景感知模块，用于感知并确定聋人的运用场景；数据采集及预处理模块，用于采集并生成广播语音数据；语音识别模块，用于接收识别该广播语音数据，加载对应该运用场景的语音识别模型，并根据该语音识别模型将该广播语音数据转换成文字信息；关键词匹配模块，用于将该文字信息与关键词进行匹配，如果该文字信息包含该关键词，则向用户交互模块发送一个匹配成功的标记；总控模块用于控制整个系统按流程运行。本发明专利技术通过确定运用场景，进行针对性的广播语音增强，提升了广播语音识别的准确性及聋哑人生活的便捷性。

Deaf reminding system, method and intelligent mobile phone

The invention relates to a method and intelligent prompt system, the mobile phone, the system includes user interaction module for interaction between the deaf and the system; scene perception module for sensing and determine the deaf use scene; data acquisition and pre-processing module, used for collecting and generating radio voice data; a voice recognition module for receiving recognition the broadcast voice data loading on speech recognition model should be applied to the scene, and the broadcast speech data into text information based on the speech recognition model; keywords matching module for matching the text information and key words, if the text message contains the keyword, is sent to the user interaction module of a successful match marking; control module is used to control the whole system according to the process operation. The invention improves the accuracy of broadcast speech recognition and the convenience of deaf mute life by determining the application scenes and carrying out targeted broadcast speech enhancement.

【技术实现步骤摘要】
一种聋人提示系统、方法及智能手机
本专利技术涉及面向聋人的提示
，尤其涉及一种聋人提示系统、方法及智能手机。
技术介绍
随着信息技术的发展，语音技术的应用越来越广，例如在银行、医院、餐厅等地，普遍使用排号机，并通过语音的方式进行叫号；在公交车、高铁等场合，也采用语音报站的方式提醒旅客。这种语音提示的方式，在极大地方便了普通大众的同时，却给聋人带来了很多不便，经常会发生错过排号或坐过站等情况。为了给聋人提供便利，出现了一些技术方案，例如：一种具有蓝牙提醒功能的聋人用公交报站器(申请号：201520256936.0)这个方案是在目前公交车报站系统上安装蓝牙模块，将报站的文字内容通过蓝牙模块向外发送，然后聋人通过自己的手机接收文字信息，并在手机上显示，同时也可以通过振动提醒聋人。这个方案存在的不足：首先要改装公交车的报站系统，而且还要加装蓝牙等模块，工程量很大，实施成本也很高。其次是用户使用起来也不方便，因为蓝牙设备是需要配对后才能使用的，即使公交车都安装了蓝牙系统，那聋人要得到这样的提醒服务，必须在上车后要将自己的手机与公交车的系统进行蓝牙的配对并绑定，如果一个聋人要转三次车，就需要在三个车上分别配对才能使用；此外这个方案是每个站都报，不能做到用户定制(当到达用户指定的那一站才提醒)，会带来不必要的干扰。聋哑人轨道交通到站提醒设备(申请号：201310268098.4)这个方案是为聋哑人提供一种轨道交通到站提醒设备，这个设备包括GPS定位模块，用于从卫星获取GPS定位数据；存储模块，用于存储轨道交通各站点的经纬度数据；振动模块，用于到站提醒；参数设置模块，用于聋哑人设置提醒站点以及提醒持续时间；控制模块，用于检测GPS定位数据是否与提醒站点的经纬度数据相同，若相同，则指令振动模块按照设定的提醒持续时间进行振动提醒。这个方案存在的不足：首先是它依赖于GPS定位，而GPS在轨道交通工具中，特别是在地铁中，往往接收不到卫星导航信号，这样提醒设备就无法获取到定位数据，也就无法正确提醒聋人到站；其次是这个设备必须存储所有站点的经纬度数据，而这些站点的数据获取，其工作量也是不小，而且还要后期维护的问题(新增的线路等)。如果要推广到所有公交车上，其站点数据就更加庞大。
技术实现思路
为了解决上述问题，本专利技术提出了一种聋人提示系统、方法及智能手机，以解决聋人经常会发生错过排号或坐过站等问题。具体地说，本专利技术公开了一种基于智能终端的聋人提示系统，其中该提示系统基于智能手机且包括总控模块、用户交互模块、场景感知模块、数据采集及预处理模块、语音识别模块、关键词匹配模块，其中：用户交互模块，用于聋人与系统之间的交互；场景感知模块，用于感知并确定聋人的运用场景；数据采集及预处理模块，用于采集广播声音，生成声音数据，并对该声音数据进行预处理，生成广播语音数据；语音识别模块，用于接收识别该广播语音数据，加载对应该运用场景的语音识别模型，并根据该语音识别模型将该广播语音数据转换成文字信息，在总控模块的控制下，将该文字信息发送到关键词匹配模块；关键词匹配模块，用于将该文字信息与关键词进行匹配，如果该文字信息包含该关键词，则向用户交互模块发送一个匹配成功的标记；总控模块用于控制整个系统按流程运行。该基于智能终端的聋人提示系统，其中该用户交互模块，包括：关键词输入模块，用于聋人在触摸屏上输入提醒内容的关键词；提醒模块，用于接收匹配成功的该标记，控制智能终端上的振动部件来提醒聋人，并在智能手机上显示提醒信息。该基于智能终端的聋人提示系统，其中该数据采集及预处理模块，包括根据该运用场景对该声音数据进行起始点和结束点检测，去除噪音。该基于智能终端的聋人提示系统，其中该场景感知模块，包括：位置分析模块，通过定位部件，获取用户当时所处的位置数据，并根据该位置数据，通过调用地图软件确定聋哑人位置属性；运动分析模块，通过运动传感器,获取聋人当时的运动属性；语义分析模块，通过分析该关键词得到其语义属性；场景确定模块，根据该位置属性、该运动属性以及该语义属性，通过加权融合的算法确定运用场景。该基于智能终端的聋人提示系统，其中该数据采集及预处理模块，包括：数据采集子模块，用于持续实时采集声音数据并存入缓冲池；数据预处理子模块，用于从该缓冲池中取出该声音数据，并从该声音数据中提取该广播语音数据，对该广播语音数据进行语音增强处理后发送给该语音识别模块。本专利技术还提出了一种基于智能终端的聋人提示方法，其中该数据采集及预处理方法，包括以下步骤：场景感知步骤，感知并确定聋人的运用场景；数据采集及预处理步骤，采集广播声音，生成声音数据，并对该声音数据进行预处理，生成广播语音数据；语音识别步骤，接收识别该广播语音数据，加载对应该运用场景的语音识别模型，并根据该语音识别模型将该广播语音数据转换成文字信息，在总控步骤的控制下，将该文字信息发送到关键词匹配步骤；关键词匹配步骤，将该文字信息与关键词进行匹配，如果该文字信息包含该关键词，则向用户交互步骤发送一个匹配成功的标记；用户交互步骤，实现聋人与系统之间的交互。该基于智能终端的聋人提示方法，其中该用户交互步骤，包括：关键词输入步骤，聋人在触摸屏上输入提醒内容的关键词；提醒步骤，接收匹配成功的该标记，控制智能终端上的振动部件来提醒聋人，并在智能手机上显示提醒信息。该基于智能终端的聋人提示方法，其中该数据采集及预处理步骤，包括：数据采集步骤，持续实时采集声音数据并存入缓冲池；数据预处理步骤，从该缓冲池中取出该声音数据，并从该声音数据中提取该广播语音数据，对该广播语音数据进行语音增强处理后发送给该语音识别步骤。该基于智能终端的聋人提示方法，其中该数据预处理步骤，包括：每次从该缓冲池中取一段固定时长的该声音数据；判断该声音数据中是否包含有广播语音，采用的判断方法为基于预先训练的分类器的方法：预先为每种场景训练一个语音分类器，该分类器为混合高斯模型、支持向量机、人工神经网络模型中的一种；若判断包含有广播语音，则进行记录后，继续取后续该声音数据进行处理；若判断未包含有广播语音，则查询是否有广播语音记录，若没有，则继续取后续声音处理，若有，则计算累计间隔时间，若该累计间隔时间小于预先规定的阈值，则继续取后续该声音数据进行处理，若该累计间隔时间大于预先规定的该阈值，则根据广播语音记录，截取从第一次记录到最后一次记录时间内所包含的全部该声音数据作为该广播语音数据，并对该广播语音数据进行语音增强处理后发送给该语音识别步骤。本专利技术还包括一种采用该提示系统的智能手机，其包括外置远讲拾音器，采用直接插入或者无线方式与智能手机连接。本专利技术技术效果在于基于常用的智能终端(手机)，采用其自带的麦克风(或可方便外接的远讲拾音器)、运动传感器、定位模块等，通过智能语音识别和关键词匹配，为聋人提供适用于排队叫号、公交到站提醒等场景的智能提示服务。与现有技术相比，该技术主要依赖于多传感器融合的智能场景感知和音频感知广播语音，无需对相应的环境或场景进行改造，在地铁、室内等GPS模块失效的场合也可正常使用，可大大提高聋人生活的便利性。附图说明图1、为系统环境组成图；图2、为系统框图组成图；图3、为提示方法的操作与运行过程图；图4、为总控模块流程图；图5、为用户交互本文档来自技高网...

【技术保护点】
一种基于智能终端的聋人提示系统，其特征在于，该提示系统基于智能手机且包括总控模块、用户交互模块、场景感知模块、数据采集及预处理模块、语音识别模块、关键词匹配模块，其中：用户交互模块，用于聋人与系统之间的交互；场景感知模块，用于感知并确定聋人的运用场景；数据采集及预处理模块，用于采集广播声音，生成声音数据，并对该声音数据进行预处理，生成广播语音数据；语音识别模块，用于接收识别该广播语音数据，加载对应该运用场景的语音识别模型，并根据该语音识别模型将该广播语音数据转换成文字信息，在总控模块的控制下，将该文字信息发送到关键词匹配模块；关键词匹配模块，用于将该文字信息与关键词进行匹配，如果该文字信息包含该关键词，则向用户交互模块发送一个匹配成功的标记；总控模块用于控制整个系统按流程运行。

【技术特征摘要】
1.一种基于智能终端的聋人提示系统，其特征在于，该提示系统基于智能手机且包括总控模块、用户交互模块、场景感知模块、数据采集及预处理模块、语音识别模块、关键词匹配模块，其中：用户交互模块，用于聋人与系统之间的交互；场景感知模块，用于感知并确定聋人的运用场景；数据采集及预处理模块，用于采集广播声音，生成声音数据，并对该声音数据进行预处理，生成广播语音数据；语音识别模块，用于接收识别该广播语音数据，加载对应该运用场景的语音识别模型，并根据该语音识别模型将该广播语音数据转换成文字信息，在总控模块的控制下，将该文字信息发送到关键词匹配模块；关键词匹配模块，用于将该文字信息与关键词进行匹配，如果该文字信息包含该关键词，则向用户交互模块发送一个匹配成功的标记；总控模块用于控制整个系统按流程运行。2.如权利要求1所述的基于智能终端的聋人提示系统，其特征在于，该用户交互模块，包括：关键词输入模块，用于聋人在触摸屏上输入提醒内容的关键词；提醒模块，用于接收匹配成功的该标记，控制智能终端上的振动部件来提醒聋人，并在智能手机上显示提醒信息。3.如权利要求1所述的基于智能终端的聋人提示系统，其特征在于，该数据采集及预处理模块，包括根据该运用场景对该声音数据进行起始点和结束点检测，去除噪音。4.如权利要求1所述的基于智能终端的聋人提示系统，其特征在于，该场景感知模块，包括：位置分析模块，通过定位部件，获取用户当时所处的位置数据，并根据该位置数据，通过调用地图软件确定聋哑人位置属性；运动分析模块，通过运动传感器,获取聋人当时的运动属性；语义分析模块，通过分析该关键词得到其语义属性；场景确定模块，根据该位置属性、该运动属性以及该语义属性，通过加权融合的算法确定运用场景。5.如权利要求1所述的基于智能终端的聋人提示系统，其特征在于，该数据采集及预处理模块，包括：数据采集子模块，用于持续实时采集声音数据并存入缓冲池；数据预处理子模块，用于从该缓冲池中取出该声音数据，并从该声音数据中提取该广播语音数据，对该广播语音数据进行语音增强处理后发送给该语音识别模块。6.一种基于智能终端的聋人提示方法，其特征在于，该数据采集及预处理方法，包括以下...

【专利技术属性】
技术研发人员：钱跃良，王向东，
申请(专利权)人：中国科学院计算技术研究所，
类型：发明
国别省市：北京,11