【技术实现步骤摘要】
本申请涉及人工智能的领域，尤其是涉及一种跨模态情感分析方法、训练方法、装置及设备。
技术介绍
1、随着人工智能的发展，人机对话交互的需求广泛出现在智能家居等场景中，通过分析人员输出的语音音频来感知人员情感，例如高兴、伤心等。目前在对对人员情感进行识别时，通常将依靠单一模态进行，例如将人员输出的音频转化成文本，仅通过文本分析人员情感，或者将人员输出的音频转化成语音向量，仅通过语音向量分析人员情感。单一模态包含的表征人员情感的特征信息较少，通过单一模态分析人员情感较为片面，导致情感分类识别准确性较低。
技术实现思路
1、为了提高情感分类识别的准确性，本申请提供一种跨模态情感分析方法、训练方法、装置及设备。
2、第一方面，本申请提供一种跨模态情感分析方法，采用如下的技术方案：
3、一种跨模态情感分析方法，包括：
4、获取待分析音频；
5、将所述待分析音频输入至训练好的网络模型进行情感分类处理，得到所述待分析音频的情感类别，所述训练好的网络模型是根据...
【技术保护点】
1.一种跨模态情感分析方法，其特征在于，包括：
2.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述对所述待分析音频进行特征提取，得到文本向量以及语音向量，包括：
3.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述基于所述文本查询向量、语音键向量以及语音值向量进行特征提取，得到第一融合特征向量，包括：
4.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述基于所述语音查询向量、文本键向量以及文本值向量进行特征提取，得到第二融合特征向量，包括：
5.根据权利要求1所述的一种跨模态情感分析...
【技术特征摘要】
1.一种跨模态情感分析方法，其特征在于，包括：
2.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述对所述待分析音频进行特征提取，得到文本向量以及语音向量，包括：
3.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述基于所述文本查询向量、语音键向量以及语音值向量进行特征提取，得到第一融合特征向量，包括：
4.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述基于所述语音查询向量、文本键向量以及文本值向量进行特征提取，得到第二融合特征向量，包括：
5.根据权利要求1所述的一种跨模态情感分析方法，其特征在于，所述基于所述第一融合...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。