【技术实现步骤摘要】
基于个体感知的语音情感识别方法、系统、装置及介质
[0001]本专利技术涉及语音信号处理
，尤其涉及一种基于个体感知的语音情感识别方法、系统、装置及介质。
技术介绍
[0002]情感计算旨在通过赋予计算机识别、理解和表达人的情感的能力，使得计算机具有更高的智能，为机器赋予感情是人工智能从“感知智能”逐渐向具有理解和表达能力的“认知智能”转变必经之路。语音作为人类最自然的表达方式，人类总是能够通过他人的语音轻易地判断他人的情感状态。在过去几十年中，语音情感识别的相关研究取得了巨大的进步，已经发展成为人机交互的重要组成部分，并在许多不同的研究领域都有着广阔的前景。随着计算机语音识别等技术的成熟，以及相关研究不断涌现，语音情感识别开始更多的应用到教育业，娱乐业，通讯业当中。加强对语音情感、情绪的识别成为了下一代人工智能发展的重点。鉴于此，开展针对语音情感识别的研究具有较强的理论价值和实用意义。
[0003]语音大模型提升了智能体基本认知能力，然而由于语音中包含说话人身份，语音内容，说话风格等丰富的信息，而情感信息交织...
【技术保护点】
【技术特征摘要】
1.一种基于个体感知的语音情感识别方法，其特征在于，包括以下步骤：获取带有标签的语音数据，根据语音数据获取原始通用语音特征；构建语音情感识别模型，所述语音情感识别模型包括个体感知模块和情感特征提取模块，所述个体感知模块包括个体情感知识学习层和调制参数生成层；根据原始通用语音特征对所述语音情感识别模型进行训练；其中，在所述个体感知模块中，将原始通用语音特征输入个体情感知识学习层提取个体情感知识嵌入，将所述个体情感知识嵌入输入到调制参数生成层生成调制参数；在情感特征提取模块中，使用个体感知模块输出的调制参数对情感特征提取模块的参数进行调整，将原始通用语音特征输入调整后的情感特征提取模块进行特征的进一步学习；获取待进行语音情感识别的语音数据，将获得的语音数据输入训练后的所述语音情感识别模型，输出识别结果。2.根据权利要求1所述的一种基于个体感知的语音情感识别方法，其特征在于，所述根据原始通用语音特征对所述语音情感识别模型进行训练，包括：所述情感特征提取模块输出的特征通过softmax分类器得到预测情感状态，损失函数和优化器通过拟合预测情感状态和真实情感状态，以元学习的方式进行模型的训练。3.根据权利要求2所述的一种基于个体感知的语音情感识别方法，其特征在于，所述以元学习的方式进行模型的训练，包括：A1、读取模型的参数，从训练集中分别从每个说话人的样本池中随机选取n个样本；n为正整数；A2、选取一个说话人i中的所选取的样本x
i
，通过个体情感知识学习层h得到嵌入v
i
，v
i
通过调制参数生成层得到调制参数，利用调制参数调整情感特征提取模块的参数，得到针对该说话人调制后的情感特征提取模块，由情感特征提取模块的输出和该说话人对应n个样本的真实标签计算损失L
i
；A3、更新模型在该说话人下的参数；A4、重复步骤A2～A3，直到所有说话人被选中；A5、根据每个说话人的模型计算出损失，并将所有损失求和取平均，根据平均损失更新原始模型的参数；A6、重复步骤A1～A5，直到训练结束。4.根据权利要求1所述的一种基于个体感知的语音情感识别方法，其特征在于，所述获取带有标签的语音数据，根据语音数据获取原始通用语音特征，包括：将录制好的语音数据，按情感类别标记上数字标签；删除语音数据中音质较低的部分，并将语音数据剪切成预设时长的语音片段，作为语音样本；将语音样本输入预训练模型，获得每条语音样本的原始通用语音特征，并划分训练样本和测试样本。5.根据权利要求1所述的一种基于个体感知的语音情感识别方法，其特征在于，所述将原始通用语音特征输入个体情感知识学习层提取个体情感知识嵌入，包括：个体情感知识学习层的主体为两层前馈神经网络，其中第一层前馈神经网络后接非线性激活函数，第一层前馈神经网络神经元个数为512，第二层神经元个数为1024...
【专利技术属性】
技术研发人员：徐向民，方元博，范为铨，邢晓芬，
申请(专利权)人：华南理工大学，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。