System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种互动式多语言交流系统技术方案_技高网

一种互动式多语言交流系统技术方案

技术编号:40879836 阅读:2 留言:0更新日期:2024-04-08 16:50
本发明专利技术公开了一种互动式多语言交流系统,涉及多语言交流系统技术领域,包括显示屏、麦克风设备、服务器和语音识别模块,所述显示屏与服务器通过互联网连接,所述显示屏与麦克风设备通过电信号数据线连接,所述服务器内安装语音识别模块,所述语音识别模块用于对语音信号进行识别处理;所述语音识别模块包括:语音输入处理单元、语音信号预处理单元和语音指令解析单元。本发明专利技术通过设计有语音识别模块,实现了对用户语音数据转文本的预处理功能,实现语音到文本的准确识别和多语言翻译,提高了多语言交流的流畅度,提供更自然的交互方式。

【技术实现步骤摘要】

本专利技术涉及多语言交流系统,具体为一种互动式多语言交流系统


技术介绍

1、在全球化发展趋势下,为方便各国人民在大环境中高效友好交流,在生活中的医院、机场等国际场合中均安装有智能化语音交流设备,方便各国人民在外高效交流和获取所需信息,但在多语言交流系统中存在不同语音的口音、语速和环境噪音的影响,导致语音识别的准确性低,从而交流翻译的结果出现偏差,难以有效交流。

2、现有交流系统技术中缺少对语音数据的处理功能,不能将语音有效识别进而转换为对应文本进行翻译,导致交流系统准确率低,无法提供高效多语言交互的技术平台。

3、因此,本申请提出一种互动式多语言交流系统能够解决对语音的准确识别和文本转化的问题,有效解决多语言系统不能满足不同语言使用者的要求的问题。

4、专利文件cn109872264b公开了一种互动式多语言文化体验系统及其互动方法,上述专利实现了解决了交流中语言不通的问题,极大地提高了多语言文化交流的体验水平,但上述专利不能实现对用户语音数据转文本的预处理功能。

5、专利文件cn111488744b公开了一种多模态语言信息ai翻译方法、系统和终端,上述专利实现了能够克服种种语言障碍,使交流非常方便,但上述专利不能实现对语言的种类选择和实时翻译显示功能。

6、专利文件cn106598956b公开了一种语言转换服务器系统,上述专利实现了为人们生活提供了便利,为科学技术传播提供渠道,节约了社会资源,具有技术前瞻性,其实现对现代社会发展,世界各国间的更深入交流发挥重大的意义,但上述专利不能实现根据用户需求对语音指令文本对应翻译的功能。

7、专利文件cn111507115b公开了一种多模态语言信息人工智能翻译方法、系统和设备,上述专利实现了能够将留言用户所使用的各种语言信息模态翻译为接听用户所能理解的语言信息模态,使交流非常方便,但上述专利不能实现不同语言匹配翻译引擎的功能。

8、综上所述,上述专利不能实现对用户语音数据转文本的预处理功能、对语言的种类选择和实时翻译显示功能、根据用户需求对语音指令文本对应翻译的功能和不同语言匹配翻译引擎的功能,导致不能语音识别不准确、不能实时交流翻译结果、不能选择语言种类匹配翻译引擎和交流交互速度慢效果差的问题;

9、为此,本申请提出了一种能实现对用户语音数据转文本的预处理功能、对语言的种类选择和实时翻译显示功能、根据用户需求对语音指令文本对应翻译的功能和不同语言匹配翻译引擎的功能的互动式多语言交流系统。


技术实现思路

1、本专利技术的目的在于提供一种互动式多语言交流系统,以解决上述
技术介绍
中提出的不能实现对用户语音数据转文本的预处理功能、对语言的种类选择和实时翻译显示功能、根据用户需求对语音指令文本对应翻译的功能和不同语言匹配翻译引擎的功能,导致不能语音识别不准确、不能实时交流翻译结果、不能选择语言种类匹配翻译引擎和交流交互速度慢效果差技术问题。

2、为实现上述目的,本专利技术提供如下技术方案:一种互动式多语言交流系统,包括显示屏、麦克风设备、服务器和语音识别模块,所述显示屏与服务器通过互联网连接,所述显示屏与麦克风设备通过电信号数据线连接,所述服务器内安装语音识别模块,所述语音识别模块用于对语音信号进行识别处理;

3、所述语音识别模块包括:语音输入处理单元、语音信号预处理单元和语音指令解析单元;

4、所述语音输入处理单元与麦克风设备通过电数据信号线连接,所述语音处理单元内设计有google speech-to-text api,对麦克风设备收集的语音数据进行语音识别;

5、所述语音信号预处理单元内设计有librosa开源语音处理库,对语音输入处理单元识别的语音数据信号进行去除噪音和降低干扰的预处理操作;

6、所述语音指令解析单元内设计有nlp自然语言处理算法解析引擎,所述语音指令解析单元与翻译引擎模块通过电数据信号线连接。

7、优选的,所述显示屏内设计有用户界面模块,用户界面模块与显示屏通过电数据信号线连接,用户界面模块用于提供用户进行交流信息选择和查看语音文本;

8、用户界面模块包括:语音输入控制单元、语言选择界面单元和实时翻译显示单元;

9、语音输入控制单元内设计有web speech api语音输入集成,允许用户点击麦克风设备按钮和说出特定关键词触发麦克风设备的语音输入电路,语音输入控制单元接收用户语音将用户语音转换为语音数据电信号;

10、语言选择界面单元使用react前端框架创建交互式语言选择组件,提供下拉菜单,允许用户在显示屏上选择输入和输出的语言形式;

11、实时翻译显示单元使用websocket与显示屏建立实时连接,通过翻译引擎翻译文本并实时更新用户界面信息显示翻译结果。

12、优选的,所述服务器内设计有翻译引擎模块,翻译引擎模块与用户界面模块通过数据线连接;

13、翻译引擎内模块包括:文本翻译单元、实时翻译管理单元和翻译质量优化单元;

14、文本翻译单元内设计有google translate api和microsoft translator api接口,文本翻译单元通过云端和本地部署与服务器进行局域连接,通过api调用,将用户语音输入的文本翻译为目标语言,并将翻译结果返回给客户端显示屏;

15、实时翻译管理单元与服务器通过云端和本地部署进行局域连接,实时翻译管理单元与服务器端建立websocket连接,实时翻译管理单元监听语音识别结果并实时进行翻译,通过websocket向客户端显示屏推送实时翻译结果;

16、翻译质量优化单元通过tensorflow机器学习框架使用用户反馈数据,实施机器学习算法不断优化翻译引擎的性能。

17、优选的,所述显示屏内设计有多语言支持模块,多语言支持模块用于对翻译语言进行文件配置和优化;

18、多语言支持模块包括:语言支持列表管理单元、用户语言选择单元和多语言性能优化单元;

19、语言支持列表管理单元使用mysql数据库管理系统存储支持的语言列表,并通过api进行动态更新;

20、用户语言选择单元内设计有react技术,用户在显示屏界面上选择源语言和目标语言,前端框架负责将用户选择的语言配置保存在用户的配置文件中;

21、多语言性能优化单元通过云端和本地部署连接到服务器,根据用户选择的语言配置选择适当的语音识别和翻译引擎,并进行性能优化满足不同语言的要求。

22、优选的,所述服务器内设计有实时交流模块,实时交流模块用于对语音数据和翻译数据进行实时传输推送;

23、实时交流模块包括:websocket连接单元、实时数据传输单元和异步处理单元;

24、websocket连接单元通过websocket协议在服务器和客户端显示屏之间建立实时双向通信连接,用于传输语音识别结果和实时翻译数据本文档来自技高网...

【技术保护点】

1.一种互动式多语言交流系统,其特征在于:包括显示屏、麦克风设备、服务器和语音识别模块,所述显示屏与服务器通过互联网连接,所述显示屏与麦克风设备通过电信号数据线连接,所述服务器内安装语音识别模块,所述语音识别模块用于对语音信号进行识别处理;

2.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述显示屏内设计有用户界面模块,用户界面模块与显示屏通过电数据信号线连接,用户界面模块用于提供用户进行交流信息选择和查看语音文本;

3.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述服务器内设计有翻译引擎模块,翻译引擎模块与用户界面模块通过数据线连接;

4.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述显示屏内设计有多语言支持模块,多语言支持模块用于对翻译语言进行文件配置和优化;

5.根据权利要求3所述的一种互动式多语言交流系统,其特征在于:所述服务器内设计有实时交流模块,实时交流模块用于对语音数据和翻译数据进行实时传输推送;

6.根据权利要求5所述的一种互动式多语言交流系统,其特征在于:所述服务器内设计有用户反馈改进模块,用户反馈改进模块用于优化翻译模型;

7.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述交流系统内设计有安全隐私模块,安全隐私模块用于对服务器和客户端之间的数据进行隐私加密;

8.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述显示屏内设计有离线功能模块,离线功能模块用于对进行无网络连接的翻译交流;

9.根据权利要求1-8任意一项所述的一种互动式多语言交流系统的使用方法,其特征在于:所述使用方法包括以下步骤:

10.根据权利要求9所述的一种互动式多语言交流系统的使用方法,其特征在于:所述使用方法还包括以下步骤:

...

【技术特征摘要】

1.一种互动式多语言交流系统,其特征在于:包括显示屏、麦克风设备、服务器和语音识别模块,所述显示屏与服务器通过互联网连接,所述显示屏与麦克风设备通过电信号数据线连接,所述服务器内安装语音识别模块,所述语音识别模块用于对语音信号进行识别处理;

2.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述显示屏内设计有用户界面模块,用户界面模块与显示屏通过电数据信号线连接,用户界面模块用于提供用户进行交流信息选择和查看语音文本;

3.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述服务器内设计有翻译引擎模块,翻译引擎模块与用户界面模块通过数据线连接;

4.根据权利要求1所述的一种互动式多语言交流系统,其特征在于:所述显示屏内设计有多语言支持模块,多语言支持模块用于对翻译语言进行文件配置和优化;

5.根据权利要求3所述的一种互动式多语言交...

【专利技术属性】
技术研发人员:杨成琰
申请(专利权)人:济南幼儿师范高等专科学校
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1