语音翻译方法、系统、装置、终端及存储介质制造方法及图纸

本公开是关于一种语音翻译方法、系统、装置、终端及存储介质。该语音翻译方法包括：基于M组训练样本训练初始翻译系统，得到训练后的翻译系统，M为N+1，N为大于1的正整数；将语音信号中的第一语音片段输入至语音编码器，得到语音编码器输出的第一语音片段对应的语音状态序列，语音信号包括多个语音片段，且语音信号属于源语言；将第一语音片段对应的语音状态序列以及N个参考数据输入至文本解码器，分别得到文本解码器输出的第一语音片段对应的、N种目标语言的目标文本片段。该方法提供的翻译系统实现了将一种源语言的语音信号翻译为多种目标语言的文本。

【技术实现步骤摘要】

本公开涉及语音翻译，尤其涉及一种语音翻译方法、系统、装置、终端及存储介质。

技术介绍

1、语音翻译技术是指将属于一种语言的语音翻译为属于另一种语言的文本的技术，语音翻译技术包括级联范式和端到端范式两种范式，目前级联范式的技术比较成熟，但由于部署复杂、维护难度大、时延较大等原因，近些年端到端范式的语音翻译技术成为研究热点。

2、相关技术中，采用端到端的语音翻译模型对语音进行翻译，将源语言的语音信号翻译为目标语言的文本，但是，在一次翻译过程中，只能实时将语音信号翻译为一种目标语言的文本，该语音翻译模型存在局限性。

技术实现思路

1、为克服相关技术中存在的问题，本公开提供一种语音翻译方法、系统、装置、终端及存储介质。

2、根据本公开实施例的第一方面，提供一种语音翻译系统，所述语音翻译系统包括语音编码器和文本解码器，

3、所述语音编码器包括依次连接的卷积神经网络、注意力网络和前馈神经网络；

4、所述文本解码器包括依次连接的n个词嵌入层、解码网络和n个输出层，所述解码网络本文档来自技高网...

【技术保护点】

1.一种语音翻译系统，其特征在于，所述语音翻译系统包括语音编码器和文本解码器，

2.一种基于权利要求1中的语音翻译系统的语音翻译方法，其特征在于，所述方法包括：

3.根据权利要求2所述的语音翻译方法，其特征在于，所述将所述第一语音片段对应的语音状态序列以及N个参考数据输入至所述翻译系统的文本解码器，分别得到所述文本解码器输出的所述第一语音片段对应的、所述N种目标语言的目标文本片段，包括：

4.根据权利要求3所述的语音翻译方法，其特征在于，所述将所述N个中间矢量分别存储至增量式解码字典中，包括：

5.根据权利要求4所述的语音翻译方法，其特征在...

【技术特征摘要】

1.一种语音翻译系统，其特征在于，所述语音翻译系统包括语音编码器和文本解码器，

2.一种基于权利要求1中的语音翻译系统的语音翻译方法，其特征在于，所述方法包括：

3.根据权利要求2所述的语音翻译方法，其特征在于，所述将所述第一语音片段对应的语音状态序列以及n个参考数据输入至所述翻译系统的文本解码器，分别得到所述文本解码器输出的所述第一语音片段对应的、所述n种目标语言的目标文本片段，包括：

4.根据权利要求3所述的语音翻译方法，其特征在于，所述将所述n个中间矢量分别存储至增量式解码字典中，包括：

5.根据权利要求4所述的语音翻译方法，其特征在于，所述方法还包括：

6.根据权利要求2所述的语音翻译方法，其特征在于，所述第一语音片段对应的语音状态序列的长度不小于预设长度，所述将语音信号中的第一语音片段输入至所述翻译系统的语音编码器，得到所述语音编码器输出的所述第一语音片段对应的语音状态序列，包括：

7.根据权利要求6所述的语音翻译方法，其特征在于，所述确定当前未输入至所述文本解码器的...

【专利技术属性】
技术研发人员：黄武伟，李响，徐哲哲，
申请(专利权)人：北京小米移动软件有限公司，
类型：发明
国别省市：