语音识别方法、语音识别系统和电器设备技术方案

本发明专利技术属于空调器技术领域，旨在解决现有的语音识别方法易发生无法准确获取用户的真实意图的问题。为此，本发明专利技术提供了一种语音识别方法、语音识别系统和电器设备，该语音识别方法包括：获取语音信息和唇语信息，根据语音信息生成第一语句；根据唇语信息生成第二语句；根据第一语句和第二语句生成最终语句。通过分别根据获取的语音信息和唇语信息生成第一语句和第二语句，然后根据第一语句和第二语句生成最终语句，将该最终语句所表达的意思视为用户的真实意图，即通过语音信息和唇语信息来共同判断用户的真实意图，通过语音信息与唇语信息之间相互印证和比较，能够显著提高判断的准确性，从而能够更准确地获取用户的真实意图。图。图。

【技术实现步骤摘要】
语音识别方法、语音识别系统和电器设备


[0001]本专利技术属于人机交互
，具体提供一种语音识别方法、语音识别系统和电器设备。

技术介绍

[0002]电器设备可以分为家用电器和商用电器，其中，家用电器主要包括洗衣机、冰箱和空调等，随着电器设备的日益普及，各种电器设备的功能也开始变得越来越强大，人们对电器设备的要求也越来越高。
[0003]以洗衣机为例，为了提升用户的使用体验，有的洗衣机增加了语音识别功能，用户可以直接对洗衣机进行语音控制，既方便又快捷。然而，在实际应用中我们发现，洗衣机的语音识别功能常常出现错误，导致洗衣机无法准确地获取用户的真实意图，影响了用户的使用体验。
[0004]公开号为CN111045639A的专利申请文件中公开了一种语音输入方法，所述方法包括：在接收到语音输入指令时，接收麦克风采集的语音信号；从所述语音信号中获取环境噪声；当所述环境噪声的声音强度大于预设强度阈值时，获取唇部图像；对所述唇部图像进行唇语识别，获取唇语识别结果；对所述语音信号进行语音识别，获取语音输入结果；在所述唇语识别结果和所述语音输入结果匹配时，将所述语音输入结果作为所述唇部图像对应的用户输入信息；显示所述用户输入信息对应的内容。也就是说，上述专利中获取唇语识别结果后，只是用唇语识别结果来判断语音输入识别结构的准确性，如果唇语识别结果和语音输入结果匹配，则可以采用语音输入结果，但是，如果不匹配呢？该专利中并没有说明唇语识别结果和语音输入结果不匹配时如何处理。
[0005]公开号为CN108319912A的专利申请文件共开了一种唇语识别方法，所述方法包括：利用摄像头获取唇语信息，所述唇语信息包括口型、口部肌肉变动信息，唇色、口边肤色信息和面部表情信息三类；将所述口型、口部肌肉变动信息与存储器中的口型模型信息进行对比分析，得到第一唇语信息；根据所述唇色、口边肤色信息检测唇色和口边肤色的色素分布，运用存储器中的智能算法进行口部运动特征判断，并与存储器中的口型模型信息进行对比分析，得到第二唇语信息；利用图像处理技术对所述面部表情信息进行表情识别，并与存储器中的表情模型信息进行对比分析，得到第三唇语信息；对所述第一唇语信息、所述第二唇语信息和所述第三唇语信息进行归一处理，将归一处理后的唇语信息转化为语音信息。也就是说，该专利中仅是通过唇语信息来获取用户的真实意图，并没有采集语音信息。但是，仅通过唇语信息来获取用户的真实意图也容易出现错误。
[0006]因此，本领域需要一种语音识别方法、语音识别系统和电器设备来解决上述问题。

技术实现思路

[0007]为了解决现有技术中的上述问题，即为了解决现有的语音识别方法易发生无法准确获取用户的真实意图的问题，本专利技术提供了一种语音识别方法，所述语音识别方法包括：
获取语音信息和唇语信息，根据所述语音信息生成第一语句；根据所述唇语信息生成第二语句；根据所述第一语句和所述第二语句生成最终语句。
[0008]在上述语音识别方法的优选技术方案中，“根据所述第一语句和所述第二语句生成最终语句”的步骤具体包括：将所述第一语句拆解以获得多个不同类别的第一意图词；将所述第二语句拆解以获得多个不同类别的第二意图词；分别判断同一类别中的所述第一意图词和所述第二意图词的语义相似度是否达到要求；根据判断结果，选择性地保留所述第一意图词或所述第二意图词；根据最终保留的所述第一意图词和所述第二意图词生成最终语句。
[0009]在上述语音识别方法的优选技术方案中，“根据判断结果，选择性地保留所述第一意图词或所述第二意图词”的步骤具体包括：如果所述第一意图词和所述第二意图词的语义相似度未达到要求，则根据环境噪音的大小，选择性地保留所述第一意图词或所述第二意图词。
[0010]在上述语音识别方法的优选技术方案中，“根据环境噪音的大小，选择性地保留所述第一意图词或所述第二意图词”的步骤具体包括：如果所述环境噪音位于低噪音区，则保留所述第一意图词；如果所述环境噪音位于中度噪音区且所述第一意图词和所述第二意图词属于高稳定性类别，则保留所述第一意图词；如果所述环境噪音位于中度噪音区且所述第一意图词和所述第二意图词属于低稳定性类别，则保留所述第二意图词；如果所述环境噪音位于高噪音区，则保留所述第二意图词，其中，所述高稳定类别的词语受环境噪音的影响程度小于所述低稳定性类别的词语受环境噪音的影响程度。
[0011]在上述语音识别方法的优选技术方案中，“根据判断结果，选择性地保留所述第一意图词或所述第二意图词”的步骤还包括：如果所述第一意图词和所述第二意图词的语义相似度达到要求，则保留所述第一意图词，或者，保留所述第二意图词，或者，随机地保留所述第一意图词或所述第二意图词中的一个。
[0012]另一方面，本专利技术还提供了一种语音识别系统，所述语音识别系统包括：声音获取装置，其配置成能够采集语音信息；图像获取装置，其配置成能够采集唇语信息；信息处理装置，其配置成能够分别根据所述声音获取装置采集的语音信息和所述图像获取装置采集的唇语信息生成第一语句和第二语句以及根据所述第一语句和所述第二语句生成最终语句。
[0013]在上述语音识别系统的优选技术方案中，所述信息处理装置包括：声音信息处理模块，其配置成能够根据所述语音信息生成所述第一语句；图像信息处理模块，其配置成能够根据所述唇语信息生成所述第二语句；语句分析处理模块，其配置成能够分别将所述第一语句和所述第二语句拆解以获得多个不同类别的第一意图词和多个不同类别的第二意图词，以及能够分别判断同一类别中的所述第一意图词和所述第二意图词的语义相似度是否达到要求，并根据判断结果，选择性地保留所述第一意图词或所述第二意图词，最后能够根据最终保留的所述第一意图词和所述第二意图词生成最终语句。
[0014]在上述语音识别系统的优选技术方案中，所述语句分析处理模块还其配置成：当所述第一意图词和所述第二意图词的语义相似度达到要求时，留所述第一意图词，或者，保留所述第二意图词，或者，随机地保留所述第一意图词或所述第二意图词中的一个；当所述第一意图词和所述第二意图词的语义相似度未达到要求时，根据所述声音获取装置采集的
环境噪音的大小，选择性地保留所述第一意图词或所述第二意图词。
[0015]在上述语音识别系统的优选技术方案中，所述语句分析处理模块还其配置成：在所述第一意图词和所述第二意图词的语义相似度未达到要求的情形下，当所述环境噪音位于低噪音区时，保留所述第一意图词；当所述环境噪音位于中度噪音区且所述第一意图词和所述第二意图词属于高稳定性类别时，保留所述第一意图词；当所述环境噪音位于中度噪音区且所述第一意图词和所述第二意图词属于低稳定性类别时，保留所述第二意图词；当所述环境噪音位于高噪音区时，保留所述第二意图词，其中，所述高稳定类别的词语受环境噪音的影响程度小于所述低稳定性类别的词语受环境噪音的影响程度。
[0016]在另一方面，本专利技术还提供了一种电器设备，所述电机设备包括上述的语音识别系统。
[0017]本领本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种语音识别方法，其特征在于，所述语音识别方法包括：获取语音信息和唇语信息，根据所述语音信息生成第一语句；根据所述唇语信息生成第二语句；根据所述第一语句和所述第二语句生成最终语句。2.根据权利要求1所述的语音识别方法，其特征在于，“根据所述第一语句和所述第二语句生成最终语句”的步骤具体包括：将所述第一语句拆解以获得多个不同类别的第一意图词；将所述第二语句拆解以获得多个不同类别的第二意图词；分别判断同一类别中的所述第一意图词和所述第二意图词的语义相似度是否达到要求；根据判断结果，选择性地保留所述第一意图词或所述第二意图词；根据最终保留的所述第一意图词和所述第二意图词生成最终语句。3.根据权利要求2所述的语音识别方法，其特征在于，“根据判断结果，选择性地保留所述第一意图词或所述第二意图词”的步骤具体包括：如果所述第一意图词和所述第二意图词的语义相似度未达到要求，则根据环境噪音的大小，选择性地保留所述第一意图词或所述第二意图词。4.根据权利要求3所述的语音识别方法，其特征在于，“根据环境噪音的大小，选择性地保留所述第一意图词或所述第二意图词”的步骤具体包括：如果所述环境噪音位于低噪音区，则保留所述第一意图词；如果所述环境噪音位于中度噪音区且所述第一意图词和所述第二意图词属于高稳定性类别，则保留所述第一意图词；如果所述环境噪音位于中度噪音区且所述第一意图词和所述第二意图词属于低稳定性类别，则保留所述第二意图词；如果所述环境噪音位于高噪音区，则保留所述第二意图词；其中，所述高稳定类别的词语受环境噪音的影响程度小于所述低稳定性类别的词语受环境噪音的影响程度。5.根据权利要求3或4所述的语音识别方法，其特征在于，“根据判断结果，选择性地保留所述第一意图词或所述第二意图词”的步骤还包括：如果所述第一意图词和所述第二意图词的语义相似度达到要求，则保留所述第一意图词，或者，保留所述第二意图词，或者，随机地保留所述第一意图词或所述第二意图词中的一个。6.一种语音识别系统，其特征在于，所述语音识别系统包括：声音获取装置，其配置成能够采集语音信息；图像获取装置...

【专利技术属性】
技术研发人员：丁晓鹏，许升，
申请(专利权)人：海尔智家股份有限公司，
类型：发明
国别省市：