【技术实现步骤摘要】
本申请涉及语音处理,尤其涉及一种基于端对端语音翻译模型的音频翻译方法及相关设备。
技术介绍
1、在音频翻译系统中,我们面临一个复杂的技术挑战。当用户上传待处理音频时,系统需要同时处理语音识别和翻译两个任务。然而,传统的流程是先进行语音识别得到源语言文本,再进行文本翻译。这种方法存在信息损失和错误累积的问题。
2、现有一种音频翻译方法,即通过设计一种端到端的音频翻译模型,从而实现同时处理语音识别和翻译两个任务。
3、然而,申请人发现,传统的音频翻译方法难以同时优化语音识别和翻译两个任务的性能,从而导致传统的音频翻译方法无法达到高准确性翻译的技术效果。
技术实现思路
1、本申请实施例的目的在于提出一种基于端对端语音翻译模型的音频翻译方法及相关设备,以解决传统的音频翻译方法无法达到高准确性翻译这一技术效果的问题。
2、为了解决上述技术问题,本申请实施例提供一种基于端对端语音翻译模型的音频翻译方法,采用了如下所述的技术方案:
3、接收用户终端发送的携
...【技术保护点】
1.一种基于端对端语音翻译模型的音频翻译方法,其特征在于,所述方法包括下述步骤:
2.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,在所述根据语音特征编码器对所述待处理音频进行语音特征编码操作,得到语音特征数据的步骤之后,还包括下述步骤:
3.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,所述根据语义特征编码器对所述语音特征数据进行语义特征编码操作,得到语义特征数据的步骤,具体包括下述步骤:
4.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,在所述根据语义特征编
...【技术特征摘要】
1.一种基于端对端语音翻译模型的音频翻译方法,其特征在于,所述方法包括下述步骤:
2.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,在所述根据语音特征编码器对所述待处理音频进行语音特征编码操作,得到语音特征数据的步骤之后,还包括下述步骤:
3.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,所述根据语义特征编码器对所述语音特征数据进行语义特征编码操作,得到语义特征数据的步骤,具体包括下述步骤:
4.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,在所述根据语义特征编码器对所述语音特征数据进行语义特征编码操作,得到语义特征数据的步骤之后,还包括下述步骤:
5.根据权利要求1所述的基于端对端语音翻译模型的音频翻译方法,其特征在于,所述根据文本序列解码器以及所述源语言文本...
【专利技术属性】
技术研发人员:唐彦玺,王健宗,瞿晓阳,张旭龙,
申请(专利权)人:平安科技深圳有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。