语音情感辨识系统及方法技术方案

技术编号:14348823 阅读:131 留言:0更新日期:2017-01-04 19:30
本发明专利技术提供一种语音情感辨识系统及方法,其中,系统包括:语音接收器,第一情感辨识子系统,第二情感辨识子系统,情感输出器;语音接收器,用于接收语音信号;第一情感辨识子系统,用于根据语音信号获取第一情感辨识结果;第二情感辨识子系统,用于根据语音信号获取第二情感辨识结果;情感输出器,用于根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态。本发明专利技术提供的语音情感辨识系统及方法,从多个角度对语音信号进行分析,可以提高语音情感辨识率。

【技术实现步骤摘要】

本专利技术涉及一种语音情感辨识系统及方法
技术介绍
语音情感辨识是指机器接收人类发出的语音信号,并对该语音信号中的情感进行辨识,从而更加灵活地执行人类发出的指令。目前,语音情感辨识系统通常采用对语音信号的声学特征进行统计计算与分析,从而判断出语音信号的情感,其缺点在于,情感辨识率低。
技术实现思路
本专利技术要解决的技术问题是提供一种语音情感辨识系统及方法,从语音信号的声学韵律特征对语音信号的情感进行辨识,同时还将语音信号转换成文本序列,并从文本序列中提取语义标签以实现对语音信号进行情感辨识,再将通过声学韵律特征获得的辨识结果与通过语义标签获得的辨识结果进行加权和计算,以获得最终的语音信号的辨识结果,从多个角度对语音信号进行分析,可以提高语音情感辨识率。为解决上述技术问题,本专利技术提供的技术方案是:一方面,提供一种语音情感辨识系统,包括:语音接收器,第一情感辨识子系统,第二情感辨识子系统,情感输出器;语音接收器,用于接收语音信号;第一情感辨识子系统,用于根据语音信号获取第一情感辨识结果;第二情感辨识子系统,用于根据语音信号获取第二情感辨识结果;情感输出器,用于根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态。进一步地,第一情感辨识子系统,具体包括,情感显著性分割器,第一情感辨识器;情感显著性分割器,用于对语音接收器的语音信号提取声学韵律特征;第一情感辨识器,用于根据声学韵律特征获取语音信号的第一情感辨识结果;第二情感辨识子系统,具体包括,语音识别器,语义标签提取器,第二情感辨识器;语音识别器,用于将语音接收器的语音信号转换成文字序列;语义标签提取器,用于提取文字序列中的语义标签;第二情感辨识器,用于根据语义标签获取语音信号的第二情感辨识结果;情感输出器,用于根据第一情感辨识结果和第二情感辨识结果的加权和,确定出语音信号的情感状态。进一步地,第一情感辨识器,包括,预先训练好的分类器和分类器选择模块;分类器包括GMM分类器,SVM分类器和MLP分类器;分类器选择模块,用于根据GMM分类器,SVM分类器,MLP分类器分别对语音信号的情感识别置信度,从GMM分类器,SVM分类器,和MLP分类器中确定出一个最佳分类器;分类器,用于根据声学韵律特征获取语音信号的第一情感辨识结果。进一步地,第二情感辨识器,根据语义标签获取语音信号的第二情感辨识结果,具体包括,第二情感辨识器,根据语义标签提取文字序列的情感关联规则,并将情感关联规则与预先获取的情感关联规则库进行匹配,以获得语音信号的第二情感辨识结果。进一步地,声学韵律特征包括,音高、强度、音质,声谱和倒谱。进一步地,语义标签为根据互联网数据库的语义标签库提取的文字序列的语义信息。进一步地,还包括人格特征存储器,人格特征存储器连接于第一情感辨识子系统和第二情感辨识子系统,用于存储说话者的人格特征信息。另一方面,提供一种语音情感辨识方法,包括:语音接收器接收语音信号;第一情感辨识子系统根据语音信号获取第一情感辨识结果;第二情感辨识子系统根据语音信号获取第二情感辨识结果;情感输出器根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态。进一步地,第一情感辨识子系统根据语音信号获取第一情感辨识结果,具体包括:对语音接收器的语音信号提取声学韵律特征;根据声学韵律特征获取语音信号的第一情感辨识结果;第二情感辨识子系统根据语音信号获取第二情感辨识结果,具体包括:将语音接收器的语音信号转换成文字序列;提取文字序列中的语义标签;根据语义标签获取语音信号的第二情感辨识结果;情感输出器根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态,具体包括:根据第一情感辨识结果和第二情感辨识结果的加权和,确定出语音信号的情感状态。进一步地,声学韵律特征包括,音高、强度、音质,声谱和倒谱;语义标签为根据互联网数据库的语义标签库提取的文字序列的语义信息。本专利技术提供的语音情感辨识系统及方法,语音接收器接收语音信号;第一情感辨识子系统根据语音信号获取第一情感辨识结果,且与此同时,第二情感辨识子系统根据语音信号获取第二情感辨识结果;最后情感输出器,根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态。本专利技术中,第一情感子系统是通过提取语音信号的声学韵律特征对语音信号的情感进行辨识;第二情感子系统是通过将语音信号转换成文本序列,并从文本序列中提取语义标签以实现对语音信号进行情感辨识;最后情感输出器将通过声学韵律特征获得的辨识结果与通过语义标签获得的辨识结果进行加权和计算,以获得最终的语音信号的辨识结果,从多个角度对语音信号进行分析,可以提高对语音信号的情感辨识率。附图说明图1是本专利技术提供的语音情感辨识系统的框图;图2是本专利技术提供的语音情感辨识系统的又一框图;图3是本专利技术提供的语音情感辨识方法的流程图;图4是本专利技术提供的语音情感辨识方法的又一流程图。具体实施方式下面通过具体的实施例进一步说明本专利技术,但是,应当理解为,这些实施例仅仅是用于更详细具体地说明之用,而不应理解为用于以任何形式限制本专利技术。实施例一结合图1,本实施例提供的语音情感辨识系统,包括:语音接收器1,第一情感辨识子系统2,第二情感辨识子系统3,情感输出器4;语音接收器1,用于接收语音信号;第一情感辨识子系统2,用于根据语音信号获取第一情感辨识结果;第二情感辨识子系统3,用于根据语音信号获取第二情感辨识结果;情感输出器4,用于根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态。优选地,如图2所示地,第一情感辨识子系统2,具体包括,情感显著性分割器201,第一情感辨识器202;情感显著性分割器201,用于对语音接收器1的语音信号提取声学韵律特征;第一情感辨识器202,用于根据声学韵律特征获取语音信号的第一情感辨识结果;第二情感辨识子系统3,具体包括,语音识别器301,语义标签提取器302,第二情感辨识器303;语音识别器301,用于将语音接收器1的语音信号转换成文字序列;语义标签提取器302,用于提取文字序列中的语义标签;第二情感辨识器303,用于根据语义标签获取语音信号的第二情感辨识结果;情感输出器4,用于根据第一情感辨识结果和第二情感辨识结果的加权和,确定出语音信号的情感状态。本专利技术实施例提供的语音情感辨识系统,语音接收器1接收语音信号;第一情感辨识子系统2根据语音信号获取第一情感辨识结果,且与此同时,第二情感辨识子系统3根据语音信号获取第二情感辨识结果;最后情感输出器4,根据第一情感辨识结果和第二情感辨识结果,确定出语音信号的情感状态。本专利技术实施例中,第一情感子系统是通过提取语音信号的声学韵律特征对语音信号的情感进行辨识;第二情感子系统是通过将语音信号转换成文本序列,并从文本序列中提取语义标签以实现对语音信号进行情感辨识;最后情感输出器4将通过声学韵律特征获得的辨识结果与通过语义标签获得的辨识结果进行加权和计算,以获得最终的语音信号的辨识结果,从多个角度对语音信号进行分析,可以提高对语音信号的情感辨识率。进一步优选地,第一情感辨识器202,包括,预先训练好的分类器和分类器选择模块;分类器包括GMM分类器,SVM分类器和MLP分类器;分类器选择模块,用于根据GMM分类器,SVM分类本文档来自技高网...
语音情感辨识系统及方法

【技术保护点】
一种语音情感辨识系统,其特征在于,包括:语音接收器,第一情感辨识子系统,第二情感辨识子系统,情感输出器;所述语音接收器,用于接收语音信号;所述第一情感辨识子系统,用于根据所述语音信号获取第一情感辨识结果;所述第二情感辨识子系统,用于根据所述语音信号获取第二情感辨识结果;所述情感输出器,用于根据所述第一情感辨识结果和所述第二情感辨识结果,确定出所述语音信号的情感状态。

【技术特征摘要】
1.一种语音情感辨识系统,其特征在于,包括:语音接收器,第一情感辨识子系统,第二情感辨识子系统,情感输出器;所述语音接收器,用于接收语音信号;所述第一情感辨识子系统,用于根据所述语音信号获取第一情感辨识结果;所述第二情感辨识子系统,用于根据所述语音信号获取第二情感辨识结果;所述情感输出器,用于根据所述第一情感辨识结果和所述第二情感辨识结果,确定出所述语音信号的情感状态。2.根据权利要求1所述的语音情感辨识系统,其特征在于,所述第一情感辨识子系统,具体包括,情感显著性分割器,第一情感辨识器;所述情感显著性分割器,用于对所述语音接收器的所述语音信号提取声学韵律特征;所述第一情感辨识器,用于根据所述声学韵律特征获取所述语音信号的所述第一情感辨识结果;所述第二情感辨识子系统,具体包括,语音识别器,语义标签提取器,第二情感辨识器;所述语音识别器,用于将所述语音接收器的所述语音信号转换成文字序列;所述语义标签提取器,用于提取所述文字序列中的语义标签;所述第二情感辨识器,用于根据所述语义标签获取所述语音信号的所述第二情感辨识结果;所述情感输出器,用于根据所述第一情感辨识结果和所述第二情感辨识结果的加权和,确定出所述语音信号的情感状态。3.根据权利要求1或2所述的语音情感辨识系统,其特征在于,所述第一情感辨识器,包括,预先训练好的分类器和分类器选择模块;所述分类器包括GMM分类器,SVM分类器和MLP分类器;所述分类器选择模块,用于根据所述GMM分类器,所述SVM分类器,所述MLP分类器分别对所述语音信号的情感识别置信度,从所述GMM分类器,SVM分类器,和MLP分类器中确定出一个最佳分类器;所述分类器,用于根据所述声学韵律特征获取所述语音信号的所述第一情感辨识结果。4.根据权利要求2所述的语音情感辨识系统,其特征在于,所述第二情感辨识器,根据所述语义标签获取所述语音信号的所述第二情感辨识结果,具体包括,所述第二情感辨识...

【专利技术属性】
技术研发人员:孙廷玮吴安翔郭英树
申请(专利权)人:竹间智能科技上海有限公司
类型:发明
国别省市:上海;31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1