一种多模态的非接触情感分析记录系统技术方案

技术编号:10529266 阅读:267 留言:0更新日期:2014-10-15 11:11
本发明专利技术公开了一种基于多模态的非接触情感分析记录系统,其特征是组成包括:用于完成从外界环境接收声音的声音接收模块、用于获取语音的音频情感标注信息的声音特征提取与处理模块、用于完成语音内容到文本内容的转换的语音识别模块、用于获取语音的文本情感标注信息的文本特征提取与处理模块、用于完成所有数据处理,存储,调度任务的综合调度模块、用于完成检测到的语音情感状态的显示的显示模块和用于完成时间记录和提供时间标签的功能的时钟模块。本发明专利技术能综合文本和音频两个模态对语音情感进行识别,从而提高识别的准确性。

【技术实现步骤摘要】
【专利摘要】本专利技术公开了一种基于多模态的非接触情感分析记录系统,其特征是组成包括:用于完成从外界环境接收声音的声音接收模块、用于获取语音的音频情感标注信息的声音特征提取与处理模块、用于完成语音内容到文本内容的转换的语音识别模块、用于获取语音的文本情感标注信息的文本特征提取与处理模块、用于完成所有数据处理,存储,调度任务的综合调度模块、用于完成检测到的语音情感状态的显示的显示模块和用于完成时间记录和提供时间标签的功能的时钟模块。本专利技术能综合文本和音频两个模态对语音情感进行识别,从而提高识别的准确性。【专利说明】一种多模态的非接触情感分析记录系统
本专利技术涉及人机情感交互领域,具体地说是一种多模态的非接触情感分析记录系 统。
技术介绍
语言是人与人之间交流最重要的工具,人类的话语中包括了文本符号信息,还饱 含了人们的情感,从语音中进行情感信息特征的人工处理,在人工智能领域具有重要意义。 人类通过语言来交流,人类的情感是通过多通道多模态表达的,例如通过语言内容、音频、 表情和肢体动作等表达情感,语音情感识别就是从语音信号中识别出说话人的情感信息。 本文档来自技高网...

【技术保护点】
一种基于多模态的非接触情感分析记录系统,其特征是组成包括:声音接收模块、声音特征提取与处理模块、语音识别模块、文本特征提取与处理模块、综合调度模块、显示模块和时钟模块;所述声音接收模块获取外界环境声音并传递给所述语音识别模块以及声音特征提取与处理模块;所述语音识别模块对所接收的外界环境声音利用ASR方法进行候选词识别,获得外界环境声音中的情感关键词和程度副词,根据所述时钟模块对所述外界环境声音中的情感关键词和程度副词给予相应的时间标签,获得包含有关键词时间标签的情感关键词和包含有副词时间标签的程度副词一并传递给所述文本特征提取与处理模块;所述文本特征提取与处理模块在所设定的周期T内根据所接收的...

【技术特征摘要】

【专利技术属性】
技术研发人员:孙晓孙重远高飞叶嘉麒任福继
申请(专利权)人:合肥工业大学
类型:发明
国别省市:安徽;34

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1