一种电子白板实时字幕与翻译的智能场景识别方法技术

本发明专利技术属于智能识别技术领域，具体涉及一种电子白板实时字幕与翻译的智能场景识别方法，通过使用的一份特定的语音训练集分别实现对场景识别模型和文本识别模型进行训练，并实现两个模型之内在输出结果上的相互协同，简化训练集，使用两个模型的输出结果之间进行印证，提高两个模型训练的精度。通过对发言者语音的识别对场景下的杂音的过滤以及减少杂音干扰场景的识别进而进一步的影响语音的转译，还通过两模型之间的相互配合，实现对目标语音的场景的精确识别，进而根据不同的场景得到精确的翻译文本，且通过将场景识别和场景识别结果对应的文本识别在两个模型之间获取，降低错误率。

【技术实现步骤摘要】

本专利技术属于智能识别，具体涉及一种电子白板实时字幕与翻译的智能场景识别方法。

技术介绍

1、随着全球化进程的加速与文化交融的深化，多语言混合使用场景已成为常态。其中，为了克服语言障碍，基于用户端进行在线语音翻译得到广泛的应用。

2、电子白板在线语音翻译一般涉及两个环节，第一是进行语音识别，即将用户输入的第一语种的语音信号转换为第一文本，第二是通过机器翻译对第一文本进行在线翻译，以得到作为翻译结果的第二语种的第二文本，最后在电子白板上显示第二语种的第二文本信息，完成从第一语种的语音转换为第二语种的文本的过程。

3、现有方案中，由于场景复杂较高，先对语音的场景进行识别，再对特定场景下的语音转译成第一文本，存在先决性，若场景预判错误，后续语音识别模型会基于错误的场景参数处理音频，导致转译错误率显著上升，且错误难以在后续步骤中纠正，这无疑对场景识别的准确度带来的了极大的挑战。

4、且由于不同场景下的语音信号复杂性、语言特征多样性及环境干扰的差异性，导致语音识别准确率下降，进而对后续翻译的语义保真度、专业适配性和用户体验造成严重本文档来自技高网...

【技术保护点】

1.一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：确认发言者语音包括：

3.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：

4.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：确定所述场景模型和文本识别模型包括:

5.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：步骤S1，所述文本识别模型包括循环神经网络和卷积神经网络之间进行级联，由卷积神...

【技术特征摘要】

1.一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：确认发言者语音包括：

3.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：

4.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：确定所述场景模型和文本识别模型包括:

5.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：步骤s1，所述文本识别模型包括循环神经网络和卷积神经网络之间进行级联，由卷积神经网络模型构建不同场景下语音特征和文本之间的关系，由循环神经网络模型获取不同场景下的语音特征之间的关联性。

6.根据权利要求1所述的一种电子白板实时字幕与翻译的智能场景识别方法，其特征在于：所述第一语种语音训练集包括第一语种的原始语音、与所述原始语音对应的各个场景以及所述原始语音在各个场景下的文本标注集合。

7.根据权利要求3所述的一种电子白板实时字幕与翻译...

【专利技术属性】
技术研发人员：罗益峰，颜专，谢凯凯，
申请(专利权)人：广州朗国电子科技股份有限公司，
类型：发明
国别省市：