一种基于唇语采集和语音拾取的多语言翻译器制造技术

本发明专利技术公开了一种基于唇语采集和语音拾取的多语言翻译器，壳体内的内部电路的音频采集装置的音频输出端与音频输入模块的输入端连接，音频输入模块的输出端与语音识别模块的音频输入端连接，语音识别模块的语音信号输出端与微处理器的语音信号输入端连接；微处理器的显示控制信号端与显示模块的控制信号输入端连接，微处理器的图像输入端与摄像头的图像输出端连接，微处理器的语音合成控制信号输出端与语音合成模块的控制信号输入端连接，微处理器的语音播放控制信号输出端与语音播放模块的控制信号输入端连接，语音合成模块的合成语音输出端与语音播放模块的语音输入端连接。该翻译器提取语音信息和说话者的唇语信息，实时进行语音翻译。

A lip reading acquisition and multi language translator based on voice pickup

The invention discloses a lip acquisition and voice pickup multi language translator based on audio output and audio input module of audio acquisition device in the shell of the internal circuit is connected to the input end and the output end of the voice recognition module, audio input module of the audio input connection, voice signal input speech signal output end speech recognition the module and microprocessor connected; the microprocessor display control signal input module and display control signal end is connected with the image output image of the input end of the microprocessor and the camera is connected with the control signal input to the micro processor control signal output end of speech synthesis and speech synthesis module is connected with the microprocessor of the voice playback control signal input the control signal output terminal and voice playback module is connected with the synthetic speech speech synthesis module. The output end is connected to the voice input of the voice playback module. The translator to extract the speech information and speaker's lip information for real-time speech translation.

【技术实现步骤摘要】
一种基于唇语采集和语音拾取的多语言翻译器
本专利技术涉及多语言翻译领域，特别是一种基于唇语采集和语音拾取的多语言翻译器。
技术介绍
随着国际间的交流的深入，与其他语种人群的交流日益频繁，不同语言之间的交流障碍问题更加突出、严重。即使是使用最为广泛的英语，在母语非英语的国家能够熟练使用的人群依然是少数。现在人们对便捷性的需求越来越多，国际化交流场合遇到的困难也越来越多。目前在国际性的商贸会谈、会议等场景下，与会人员往往是来自多个国家，这样就需要很多专门的口译人员进行高强度的口译工作。但是这样过于依赖口译人员的专业素养和精力，所耗费的人力财力是很高的。此外，随着国际间旅游等民间往来的频繁，随时随地的交流的现象愈加明显。现如今，计算机、云计算和移动互联网的迅猛发展使得深度学习、智能云端翻译已经拥有相当可观的即时翻译能力。但是现有的语言翻译器多是根据拾取的语音进行翻译，在使用过程中，用户的使用环境并不一定便于语音翻译器进行语音采集，若采集的语音不够准确，则翻译器翻译出来的结果则会出现错误，为用户提供错误的信息。
技术实现思路
本专利技术的目的在于克服现有技术的不足，提供一种基于唇语采集和语音拾取的多语言翻译器，该翻译器拾取语音提取语音信息，同时通过摄像头采集说话者的唇语信息，结合唇语信息和语音信息来进行语音翻译，能够实时进行语音翻译，为用户出国提供了极大的便利，为用户提供更好的使用体验。本专利技术的目的是通过以下技术方案来实现的：一种基于唇语采集和语音拾取的多语言翻译器，它包括壳体和内部电路，所述的内部电路包括微处理器、音频采集装置、音频输入模块、语音识别模块、摄像头、语音合成模块、语音播放模块和显示模块，所述的音频采集装置的音频输出端与音频输入模块的输入端连接，所述的音频输入模块的输出端与语音识别模块的音频输入端连接，语音识别模块的语音信号输出端与微处理器的语音信号输入端连接；所述的微处理器的显示控制信号端与显示模块的控制信号输入端连接，所述微处理器的图像输入端与摄像头的图像输出端连接，所述的微处理器的语音合成控制信号输出端与语音合成模块的控制信号输入端连接，所述的微处理器的语音播放控制信号输出端与语音播放模块的控制信号输入端连接，所述的语音合成模块的合成语音输出端与语音播放模块的语音输入端连接。所述的内部电路还包括无线传输模块，所述的微处理器的数据传输控制信号端与无线传输模块的控制信号输入端连接。所述的无线传输模块包括WIFI模块和GPRS模块。所述的内部电路还包括扬声器，语音播放模块的输出端与扬声器的输入端连接，扬声器设置在壳体上。所述的语音播放模块包括功率放大模块，所述的微处理器的语音播放控制信号输出端与功率放大器的控制信号输入端连接，所述的语音合成模块的合成语音输出端与功率放大模块的合成语音输入端连接，功率放大模块的输出端与扬声器的输入端连接。所述的翻译器还包括供电模块，所述的供电模块包括蓄电池和充电电路，所述的蓄电池的供电端口与微处理器的供电端口连接，所述的充电电路的输出端与蓄电池的充电端口连接，充电电路的输入端与翻译器壳体上的充电端口连接。本专利技术的有益效果是：本专利技术提供了一种基于唇语采集和语音拾取的多语言翻译器，该翻译器拾取语音提取语音信息，同时通过摄像头采集说话者的唇语信息，结合唇语信息和语音信息来进行语音翻译，翻译笔设置无线传输模块，将带翻译语音实时传输到远程翻译平台，实时进行语音翻译，为用户出国提供了极大的便利，为用户提供更好的使用体验，翻译笔设置蓄电池，结构小巧，待机时间长，可充电设置，有利于及时补充电量。附图说明图1为本专利技术的翻译器的结构框图。具体实施方式下面结合附图进一步详细描述本专利技术的技术方案，但本专利技术的保护范围不局限于以下所述。如图1所示，一种基于唇语采集和语音拾取的多语言翻译器，它包括壳体和内部电路，所述的内部电路包括微处理器、音频采集装置、音频输入模块、语音识别模块、摄像头、语音合成模块、语音播放模块和显示模块，所述的音频采集装置的音频输出端与音频输入模块的输入端连接，所述的音频输入模块的输出端与语音识别模块的音频输入端连接，语音识别模块的语音信号输出端与微处理器的语音信号输入端连接；所述的微处理器的显示控制信号端与显示模块的控制信号输入端连接，所述微处理器的图像输入端与摄像头的图像输出端连接，所述的微处理器的语音合成控制信号输出端与语音合成模块的控制信号输入端连接，所述的微处理器的语音播放控制信号输出端与语音播放模块的控制信号输入端连接，所述的语音合成模块的合成语音输出端与语音播放模块的语音输入端连接。所述的内部电路还包括无线传输模块，所述的微处理器的数据传输控制信号端与无线传输模块的控制信号输入端连接。所述的无线传输模块包括WIFI模块和GPRS模块。所述的内部电路还包括扬声器，语音播放模块的输出端与扬声器的输入端连接，扬声器设置在壳体上。所述的语音播放模块包括功率放大模块，所述的微处理器的语音播放控制信号输出端与功率放大器的控制信号输入端连接，所述的语音合成模块的合成语音输出端与功率放大模块的合成语音输入端连接，功率放大模块的输出端与扬声器的输入端连接。所述的翻译器还包括供电模块，所述的供电模块包括蓄电池和充电电路，所述的蓄电池的供电端口与微处理器的供电端口连接，所述的充电电路的输出端与蓄电池的充电端口连接，充电电路的输入端与翻译器壳体上的充电端口连接。本专利技术的翻译器的音频采集装置采集语音并通过语音识别模块识别后传输到微处理器，摄像头采集用户的唇语图像并传输到微处理器，微处理器将语音信息与唇语信息对比确认后将语音信号传输到远程翻译平台实现翻译，并接收翻译后的语音信息，再通过语音播放模块播放出来，同时将译文显示在显示屏上，便于用户阅读。本专利技术的翻译器拾取语音提取语音信息，同时通过摄像头采集说话者的唇语信息，结合唇语信息和语音信息来进行语音翻译，翻译笔设置无线传输模块，将带翻译语音实时传输到远程翻译平台，实时进行语音翻译，为用户出国提供了极大的便利，为用户提供更好的使用体验，翻译笔设置蓄电池，结构小巧，待机时间长，可充电设置，有利于及时补充电量。本文档来自技高网...

【技术保护点】
一种基于唇语采集和语音拾取的多语言翻译器，其特征在于：它包括壳体和内部电路，所述的内部电路包括微处理器、音频采集装置、音频输入模块、语音识别模块、摄像头、语音合成模块、语音播放模块和显示模块，所述的音频采集装置的音频输出端与音频输入模块的输入端连接，所述的音频输入模块的输出端与语音识别模块的音频输入端连接，语音识别模块的语音信号输出端与微处理器的语音信号输入端连接；所述的微处理器的显示控制信号端与显示模块的控制信号输入端连接，所述微处理器的图像输入端与摄像头的图像输出端连接，所述的微处理器的语音合成控制信号输出端与语音合成模块的控制信号输入端连接，所述的微处理器的语音播放控制信号输出端与语音播放模块的控制信号输入端连接，所述的语音合成模块的合成语音输出端与语音播放模块的语音输入端连接。

【技术特征摘要】
1.一种基于唇语采集和语音拾取的多语言翻译器，其特征在于：它包括壳体和内部电路，所述的内部电路包括微处理器、音频采集装置、音频输入模块、语音识别模块、摄像头、语音合成模块、语音播放模块和显示模块，所述的音频采集装置的音频输出端与音频输入模块的输入端连接，所述的音频输入模块的输出端与语音识别模块的音频输入端连接，语音识别模块的语音信号输出端与微处理器的语音信号输入端连接；所述的微处理器的显示控制信号端与显示模块的控制信号输入端连接，所述微处理器的图像输入端与摄像头的图像输出端连接，所述的微处理器的语音合成控制信号输出端与语音合成模块的控制信号输入端连接，所述的微处理器的语音播放控制信号输出端与语音播放模块的控制信号输入端连接，所述的语音合成模块的合成语音输出端与语音播放模块的语音输入端连接。2.根据权利要求1所述的一种基于唇语采集和语音拾取的多语言翻译器，其特征在于：所述的内部电路还包括无线传输模块，所述的微处理器的数据传输控制信号端与无线传输模块的控制信号输入端连接...

【专利技术属性】
技术研发人员：焦友明，刘念邱，
申请(专利权)人：成都铅笔科技有限公司，
类型：发明
国别省市：四川,51