情绪识别方法、摄像装置、情绪识别装置及存储装置制造方法及图纸

本申请公开了一种情绪识别方法、摄像装置、情绪识别装置及存储装置。该方法包括：获取目标的音频信息和文本信息；其中，文本信息是基于音频信息得到的；分别提取音频信息的音频特征和文本信息的文本特征；基于音频特征与文本特征之间的相关性，分别对音频特征与文本特征进行修正，得到音频修正特征和文本修正特征；融合音频修正特征和文本修正特征进行情绪识别，得到目标的情绪分类。上述方案，能够提高情绪识别的准确率。情绪识别的准确率。情绪识别的准确率。

【技术实现步骤摘要】
情绪识别方法、摄像装置、情绪识别装置及存储装置


[0001]本申请涉及情绪识别
，特别是涉及一种情绪识别方法、摄像装置、情绪识别装置及存储装置。

技术介绍

[0002]随着人工智能技术的不断发展，人们对于交互体验要求的不断提高，目前情绪识别作为一种人机交互技术，已广泛应用于各种场景中。
[0003]例如在服务领域，可以根据来电用户的情绪来判断服务满意程度；在医疗领域，可以将患者情绪变化的检测结果作为病症诊断和治疗的依据；在教育领域，可以根据课堂学生的情绪变化做教学调整等。大多数情绪识别是基于待检测目标的视觉、语音、文本、行为、生理信号等信息进行的，虽然可以在各场景对目标的情绪进行检测，但目前情绪识别准确率不高，从而影响情绪识别效果。

技术实现思路

[0004]本申请主要解决的技术问题是提供一种情绪识别方法、摄像装置、情绪识别装置及存储装置，能够提高情绪识别的准确率。
[0005]为了解决上述问题，本申请第一方面提供了一种情绪识别方法，该方法包括：获取目标的音频信息和文本信息；其中，文本信息是基于音频信息得到本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种情绪识别方法，其特征在于，所述方法包括：获取目标的音频信息和文本信息；其中，所述文本信息是基于所述音频信息得到的；分别提取所述音频信息的音频特征和所述文本信息的文本特征；基于所述音频特征与所述文本特征之间的相关性，分别对所述音频特征与所述文本特征进行修正，得到音频修正特征和文本修正特征；融合所述音频修正特征和文本修正特征进行情绪识别，得到所述目标的情绪分类。2.根据权利要求1所述的方法，其特征在于，所述基于所述音频特征与所述文本特征之间的相关性，分别对所述音频特征与所述文本特征进行修正，得到音频修正特征和文本修正特征，包括：基于所述音频特征与所述文本特征之间的第一相关性，对所述文本特征进行修正，得到所述文本修正特征；以及，基于所述音频特征与所述文本特征之间的第二相关性，对所述音频特征进行修正，得到所述音频修正特征。3.根据权利要求2所述的方法，其特征在于，所述基于所述音频特征与所述文本特征之间的第一相关性，对所述文本特征进行修正，得到所述文本修正特征，包括：基于所述音频特征和所述文本特征，获取表示所述第一相关性的第一注意力权重；利用所述第一注意力权重对所述文本特征进行修正，得到所述文本修正特征；和/或，所述基于所述音频特征与所述文本特征之间的第二相关性，对所述音频特征进行修正，得到所述音频修正特征，包括：基于所述音频特征和所述文本特征，获取表示所述第二相关性的第二注意力权重；利用所述第二注意力权重对所述音频特征进行修正，得到所述音频修正特征。4.根据权利要求3所述的方法，其特征在于，所述基于所述音频特征和所述文本特征，获取表示所述第一相关性的第一注意力权重或所述第二相关性的第二注意力权重，包括：利用所述音频特征和所述文本特征进行缩放点积，得到特征分数值；对所述特征分数值进行注意力操作，得到所述第一注意力权重或所述第二注意力权重。5.根据权利要求1所述的方法，其特征在于，所述提取所述音频信息的音频特征，包括：利用音频提取模型对所述音频信息进行处理，得到所述音频信息的音频特征；其中，所述音频提取模型包括卷积神经网络和双向长短期记忆网络。6.根据权利要求5所述的方法，其特征在于，所述利用音频提取模型对所述音频信...

【专利技术属性】
技术研发人员：易冠先，陈波扬，刘德龙，王康，
申请(专利权)人：浙江大华技术股份有限公司，
类型：发明
国别省市：