【技术实现步骤摘要】
一种基于语音情感分析和微表情识别的演讲辅助系统
本专利技术涉及一种语音处理和表情处理技术，尤其是一种基于语音情感分析和微表情识别的演讲辅助系统。
技术介绍
情感分析技术是人机交互技术的一个非常重要的组成部分，而语音作为人类表达情感极其关键的通道，其中包含了很多关键的情感信息。语音情感分析的最终目的就是让机器能够通过语音来识别人类的情感，从而做出更加合理的决策，这项研究在未来有着极其广泛的应用场景。微表情属于心理学的专业名词，它可以将表演者内心的真情实感通过自己的微表情展现给其他人，是赋予人们交流与思维的一种工具。戏剧表演艺术是人们通过内心的情感和小表情以及演奏等各种形式表演出来的一门生活艺术，微表情在戏剧表演艺术中的作用越来越重要，是把握表演效果的直接方法。与此同时，微表情也是判断一个人真实情感的最有利的线索。经过几十年的理论发展和试验验证，微表情逐渐被学术界接受和认可，美国已经在这方面进行了几十年的研究工作，已被美国交通运输安全部用于多个机场的安检中。此外，在美国司法审讯、临床医学等领域也进行了应用测试。对...
【技术保护点】
1.一种基于语音情感分析和微表情识别的演讲辅助系统，包括语音情感分析模块、语音数据收集模块、微表情识别模块、微表情分析模块和语音情感修正模块，可以同时检测演讲者语音情感变化和观众微表情变化的功能，并且进一步给予实时情绪修正反馈，优化演讲者的演讲过程；/n语音数据收集模块，收集演讲者在演讲时的声音数据；/n语音情感分析模块，可以在所述语音数据收集模块收集到演讲者演讲时的声音信息后，与演讲者非演讲状态下的语音数据进行声音波形、声音强度等方面的对比，从而进行语音情感分析；/n微表情识别模块，通过拍摄观众在聆听演讲时的面部照片，截取采样面部表情的几个区域，从而实时获取观众的微表情变...
【技术特征摘要】
1.一种基于语音情感分析和微表情识别的演讲辅助系统，包括语音情感分析模块、语音数据收集模块、微表情识别模块、微表情分析模块和语音情感修正模块，可以同时检测演讲者语音情感变化和观众微表情变化的功能，并且进一步给予实时情绪修正反馈，优化演讲者的演讲过程；
语音数据收集模块，收集演讲者在演讲时的声音数据；
语音情感分析模块，可以在所述语音数据收集模块收集到演讲者演讲时的声音信息后，与演讲者非演讲状态下的语音数据进行声音波形、声音强度等方面的对比，从而进行语音情感分析；
微表情识别模块，通过拍摄观众在聆听演讲时的面部照片，截取采样面部表情的几个区域，从而实时获取观众的微表情变化；
微表情分析模块，获取到观众的微表情信息之后，对观众的情绪进行类别划分；
语音情感修正模块，可以帮助演讲者实时进行演讲情绪调动，进一步加强演讲的成熟度；
所述语音数据收集模块，其特征在于，通过与演讲者使用的扩音装置直接进行连接，可以获取外在干扰较少的实时演讲语音信息，通过使用基础的中值滤波和切比雪夫滤波，对声音信号进行基础的模电转换，为后续进一步进行声音对比处理提供数据。
2.根据权利要求1所述的一种基于语音情感分析和微表情识别的演讲辅助系统，其特征在于，所述语音数据情感模块对声音信号进行分析，通过事前录制演讲者在干扰较小的环境中的语音作为无干扰的参照组，与演讲时获取到的演讲声音进行比对分析，具体步骤为：
步骤1、获取一段安静环境下的演讲者语音片段，录制时尽量避开吵闹环境，选择密闭的房间进行录制，保证干扰信息较少，以此录音作为无干扰声音的参考组；
步骤2、对演讲者在演讲时的声音信号进行处理；
步骤21、以分帧的方式处理获取到的演讲语音片段，每一段语音可以按长短需求截取并记录成utterance1、utterance2、utterance3等等，用以标记一句话或者一个语音样本；
步骤22、建立起语音处理的数据参考库，采集国内外经典演讲视频的20个主要LLD特征建立数据集，其中，LLDs是手工设计的一些低水平特征；
步骤23、对语音样本的每一帧的语音信息按照先后顺序标记，分别记作frame1、frame2、frame3等等，使用LLDs在一帧语音上进行计算，用来表示一帧语音的特征；
步骤3、将用于参照的语音信息和获取到的演讲声音片...
【专利技术属性】
技术研发人员：逯伟，辛淼，冷聪，
申请(专利权)人：中国科学院自动化研究所南京人工智能芯片创新研究院，中国科学院自动化研究所，
类型：发明
国别省市：江苏;32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。