一种发音检测方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:26973664 阅读:35 留言:0更新日期:2021-01-06 00:07
本公开提供了一种发音检测方法、装置、计算机设备和存储介质,其中,该方法包括:针对任一目标用户,获取目标用户的音频数据;针对所述音频数据包含的每一音素,利用预先构建的网络对该音素进行解码,得到该音素对应的时间边界;利用音素编码模型分别对确定了时间边界的每一音素进行编码,确定每一音素对应的第一音素向量;针对每一音素,确定该音素对应的第一音素向量与第二音素向量之间的距离,第二音素向量为所述音素编码模型训练过程中获得的该音素对应的向量;根据各音素对应的第一音素向量与第二音素向量之间的距离,对音频数据进行检测。本公开实施例根据各用户的发音特性进行个性化检测,从而提高了发音检测结果的准确性。

【技术实现步骤摘要】
一种发音检测方法、装置、计算机设备和存储介质
本公开涉及音频检测
,具体而言,涉及一种发音检测方法、装置、计算机设备和存储介质。
技术介绍
随着在线教育业务的兴起,用户在线朗读文本,由客户端编码得到相应的音频数据,服务器对接收到的音频数据进行检测,以判断用户朗读是否准确。目前,用户在朗读英文或中文文本时,对于朗读正确与否的判断,服务器通常是从用户语音中提取表征发音特性的特征,对发音打分或做正误分类,根据发音得分划定门限或者根据分类结果,从而判断发音是否正确。但是,这种根据单次语音的发音特性判读正误,受限于切分准确性及分类模型的泛化能力,导致判断结果存在一定的误差,降低了检测结果的准确性。
技术实现思路
本公开实施例至少提供一种发音检测方法、装置、计算机设备和存储介质。第一方面,本公开实施例提供了一种发音检测方法,包括:针对任一目标用户,获取所述目标用户的音频数据,并提取所述音频数据的声学特征,所述音频数据中包括音素;针对任一目标用户,获取所述目标用户的音频数据,所述音频数据中包括音素;<本文档来自技高网...

【技术保护点】
1.一种发音检测方法,其特征在于,包括:/n针对任一目标用户,获取所述目标用户的音频数据,所述音频数据中包括音素;/n针对所述音频数据包含的每一音素,利用预先构建的网络对该音素进行解码,得到该音素对应的时间边界,所述网络为利用所述音频数据对应的文本信息构建的;/n利用音素编码模型分别对确定了时间边界的每一音素进行编码,确定每一音素对应的第一音素向量,其中所述音素编码模型为基于所述目标用户产生的音频样本数据进行训练得到的;/n针对每一音素,确定该音素对应的第一音素向量与第二音素向量之间的距离,所述第二音素向量为所述音素编码模型训练过程中获得的该音素对应的向量;/n根据各音素对应的第一音素向量与第...

【技术特征摘要】
1.一种发音检测方法,其特征在于,包括:
针对任一目标用户,获取所述目标用户的音频数据,所述音频数据中包括音素;
针对所述音频数据包含的每一音素,利用预先构建的网络对该音素进行解码,得到该音素对应的时间边界,所述网络为利用所述音频数据对应的文本信息构建的;
利用音素编码模型分别对确定了时间边界的每一音素进行编码,确定每一音素对应的第一音素向量,其中所述音素编码模型为基于所述目标用户产生的音频样本数据进行训练得到的;
针对每一音素,确定该音素对应的第一音素向量与第二音素向量之间的距离,所述第二音素向量为所述音素编码模型训练过程中获得的该音素对应的向量;
根据各音素对应的第一音素向量与第二音素向量之间的距离,对所述音频数据进行检测。


2.根据权利要求1所述的方法,其特征在于,根据各音素对应的第一音素向量与第二音素向量之间的距离,对所述音频数据进行检测,具体包括:
针对每一音素,根据该音素对应的第一音素向量与第二音素向量之间的距离,在所述距离小于等于第一预设阈值的情况下,确定所述音频数据中该音素发音正确;如果所述音频数据中所有音素发音正确,则确定所述音频数据发音正确;
在所述距离大于第二预设阈值的情况下,确定所述音频数据中该音素发音错误;如果所述音频数据中至少一个音素发音错误,则确定所述音频数据发音错误。


3.根据权利要求2所述的方法,其特征在于,在所述距离小于第一预设阈值的情况下,确定所述音频数据中该音素发音正确之后,还包括:
针对发音准确的音素,利用其对应的第一音素向量更新其对应的第二音素向量。


4.根据权利要求2所述的方法,其特征在于,还包括:
针对发音错误的音素,统计该音素发音错误的次数;
如果该音素的发音错误次数达到第三预设阈值;并
判断该音素对应的第二音素向量是否存在更新;
如果该音素对应的第二音素向量不存在更新,则确定该音素系统性发音错误。


5.根据权利要求4所述的方法,其特征在于,还包括:
针对系统性发音错误的音素,分别确定该音素对应的第一音素向量与第三音素对应的第二音素向量之间的距离,将距离最小的第三音素作为提示音素,其中,所述第三音素为预设音素中除该音素以外的音素。


6.根据权利要求2所述的方法,其特征在于,按照以下方法确定所述第一预设阈值:
针对每一音素,获取该音素正确发音的第一样本集合;
利用所述音素编码模型对所述第一样本集合中的每一样本分别进行编码,得到该音素对应的第四音素向量集合;
分别确定所述第四音素向量集合...

【专利技术属性】
技术研发人员:蒋成林梁球斌其他发明人请求不公开姓名
申请(专利权)人:北京乐学帮网络技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1