【技术实现步骤摘要】
说话人分割聚类方法、装置、设备及存储介质
[0001]本专利技术涉及但不限于人工智能
，尤其涉及一种说话人分割聚类方法、装置、设备及存储介质。
技术介绍
[0002]说话人分割聚类(Speaker Diarization)，是按照说话人的身份，将不同说话人的声音区分开来的技术，解决了“谁在什么时候说了话”的问题。
[0003]目前，在分割的过程中，会按固定的单一分割时长对音频流进行分割，或者按可变的分割时长对音频流进行分割，得到多个语音段，在聚类的过程中会根据相似性结果预测说话人标签，语音段的长度很大程度上决定了聚类结果的好坏；若语音段的长度过短，语音段包含的说话人特征信息较少，提取出的说话人特征的可信度较低；若语音段的长度过长，一个语音段内很有可能包含了多个说话人的语音，降低说话人标签预测的准确率；因此，无法既保证说话人特征的可信度，又保证说话人标签预测的准确率，导致聚类结果较差。
技术实现思路
[0004]以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。
[...
【技术保护点】
【技术特征摘要】
1.一种说话人分割聚类方法，其特征在于，包括：获取音频流，其中，所述音频流中的语音帧包含来自至少一个说话人的语音；将所述音频流输入至少两个语音分割模型中，分别得到语音集合，其中，所述语音分割模型被配置为按固定的分割时长进行语音分割，任意两个所述语音分割模型的分割时长不同；对所述语音集合进行归类处理，得到多组相近语音集合；对所述相近语音集合进行相似性得分处理，得到相似性得分矩阵；根据所述相似性得分矩阵，对所述语音集合进行聚类处理，得到语音簇；根据所述语音簇，建立说话人分类模型；根据所述说话人分类模型，将所述音频流中的语音帧与所述说话人对准。2.根据权利要求1所述的方法，其特征在于，所述将所述音频流输入至少两个语音分割模型中，分别得到语音集合的步骤之后，还包括：根据每个所述语音分割模型的分割时长，分别对每个所述语音分割模型的分割起点进行相应的时移；将所述音频流输入每个所述时移后的语音分割模型中，分别得到辅助语音集合，其中，所述辅助语音集合与所述语音集合一一对应；将所述辅助语音集合与对应的所述语音集合进行合并处理，更新所述语音集合。3.根据权利要求2所述的方法，其特征在于，所述语音分割模型的分割起点的时移长度为对应的所述语音分割模型的分割时长的一半。4.根据权利要求1所述的方法，其特征在于，每个所述语音集合至少包含两个语音段；所述对所述语音集合进行归类处理，得到多组相近语音集合，包括：取所述语音分割模型中分割时长最短的语音分割模型得到的语音集合作为基准语音集合；依次计算所述基准语音集合的每个语音段与所有所述语音集合的每个语音段之间的基准长度中心距离；对于所述基准语音集合的任意一个语音段，取每一个所述语音集合中基准长度中心距离最小的语音段组成相近语音集合。5.根据权利要求1所述的方法，其特征在于，所述对所述相近语音集合进行相似性得分处理，得到相似性得分矩阵，包括：对任意两个所述相近语音集合进行特征提取，分别得到第一特征向量集合和第二特征向量集合；将所述第一特征向量集合和所述第二特征向量集合输入得分计算模型，得到相似性得分；对所述第一特征向量集合和所述第二特征向量集合进行相似性计算，得到相似度矩阵；根据相似性得分和所述相似度矩阵，得到相似性得分矩阵。6.根据权利要求5所述的方法，其特征在于，所述得分计算模型的训练过程如下：获取训练音频流和说话人标签，其中，所述训练音频流中的语音帧包含来自至少一个说话人的语音，所述说话人标签用于表征所述训练音频流中的语音帧对准的说话人；
将所述训练音频流输入至少两个所述语音分割模型中，分别得到语音训练集合；对所述语音训练集合进行归类处理，得到多组相近语音训练集合；对任意两个所述相近语音训练集合进行特征提取，...
【专利技术属性】
技术研发人员：刘博卿，王健宗，张之勇，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。