【技术实现步骤摘要】
本专利技术实施例涉及互联网,尤其涉及模型训练、语音生成方法、装置、设备及介质。
技术介绍
1、在人机互动场景中,用户可以通过多种方式与虚拟对象互动。为了使得用户获得更好的交互体验,虚拟对象可以通过动作、表情、语言等多种方式作出回应。
2、其中,虚拟对象与用户通过语音交互是一种常见交互方式。然而,现有的语音交互过程中,虚拟对象的语音表达往往比较单一。比如,不同虚拟对象所表达出的语音比较雷同,或者,仅仅通过不同音色表示不同性别的虚拟人物。无法像真实人物一样通过语音交互,用户难以获得真实的交互体验。因此,需要一种快速生成更加真实语音信息的方案。
技术实现思路
1、本专利技术实施例提供模型训练、语音生成方法、装置、设备及介质,用以提高生成语音信息的效率和真实效果的方案。
2、第一方面,本专利技术实施例提供一种模型训练方法,该方法包括:
3、根据目标文本对应的音素特征表示与目标对象声音的嵌入表示,生成携带有目标对象声音特性的先验音素特征分布参数;
4、
...【技术保护点】
1.一种模型训练方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述将所述目标对象声音的嵌入表示和所述先验音素特征分布参数输入到第一模型进行一致性知识蒸馏训练,得到第二模型,包括:
3.根据权利要求2所述的方法,其特征在于,所述在确定所述预测样本符合需求的情况下,进行一致性知识蒸馏训练得到所述第二模型,包括:
4.根据权利要求1所述的方法,其特征在于,所述根据目标文本对应的音素特征表示与目标对象声音的嵌入表示,生成携带有目标对象声音特性的先验音素特征分布参数,包括:
5.根据权利要求4所述的方
...【技术特征摘要】
1.一种模型训练方法,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述将所述目标对象声音的嵌入表示和所述先验音素特征分布参数输入到第一模型进行一致性知识蒸馏训练,得到第二模型,包括:
3.根据权利要求2所述的方法,其特征在于,所述在确定所述预测样本符合需求的情况下,进行一致性知识蒸馏训练得到所述第二模型,包括:
4.根据权利要求1所述的方法,其特征在于,所述根据目标文本对应的音素特征表示与目标对象声音的嵌入表示,生成携带有目标对象声音特性的先验音素特征分布参数,包括:
5.根据权利要求4所述的方法,其特征在于,所述对所述编码音素向量进行处理,得到携带有预测时长的所述先验音素特征分布参数,包括:
6.根据权利要求5所述的方法,其特征在于,所述利用第二损失函数对所述待校正分布参数进行校正,得到携带有所述预测时长的所述先验音素特征分布参数,包括:
7.一种语音生成方法,其特征在于,所述方法包括:
8...
【专利技术属性】
技术研发人员:刘博翀,柳毅恒,刘炎,覃建策,陈邦忠,
申请(专利权)人:完美世界北京软件科技发展有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。