一种视频通话的数据处理方法和装置制造方法及图纸

本发明专利技术提供了一种视频通话的数据处理方法和装置，所述装置包括多个终端和服务器，所述终端包括第一终端和第二终端；所述方法通过第一音频效果单元将第一音频数据识别成文字数据并叠加数字音频音效/音频变速效果，以及通过第一音频识别子单元将第一音频数据识别成第一文字数据；第一显示合成单元将第一文字数据与第一视频数据进行合成；第一编码单元将第一音频数据和第一视频视频分别按照对应的预设格式进行编码压缩，并打包得到第一编码多媒体数据；第一通信单元将第一编码多媒体数据发送至第二终端。本发明专利技术通过在视频通话过程中将音频音效/音频变速效果叠加到音频数据上，将通话语音识别成文字信息，并与视频数据叠加，有效增强了用户体验。

Data processing method and device for video call

The present invention provides a video call data processing method and device, the device includes a plurality of terminal and the server, the terminal comprises a first terminal and a second terminal; the method by unit of the first audio effect first audio data into text recognition data and digital audio / audio transmission superposition sound effect, and through the first audio recognition unit will become the first text data of the first audio data recognition; the first display unit for the first synthesis of synthetic text data and the first video data; the first encoding unit first audio data and the first video respectively according to the corresponding preset format for encoding and compression, packaged first encoding multimedia data; the first communication unit transmits the first encoding the multimedia data is transmitted to the terminal second. In the invention, audio, sound and sound speed changing effects are superimposed onto audio data, and the call speech is recognized as text information and superimposed with video data, thereby effectively enhancing the user experience.

【技术实现步骤摘要】
一种视频通话的数据处理方法和装置
本专利技术涉及视频应用领域，特别涉及一种视频通话的数据处理方法和装置。
技术介绍
数字通信基础设施日益演进，通信带宽越来越宽，通信介质中承载的数据从最初的文字(电报)和语音，发展到现在的视频通话。视频电话时，数字通信系统需要同时传输压缩的视频数据和音频数据，对通信带宽、通信实时性和系统音视频处理能力有极高的要求。视频通话最基础的要求是对音频数据和视频数据按照通用的格式编码压缩，再打包成通用的传输流格式，再通过通信基础设施传输给对方。现有的视频通话一般通过摄像头来捕捉视频数据以及用麦克风捕捉音频数据，并对捕捉的视频数据和音频数据直接传输，无法实现对视频数据或音频数据的效果渲染处理，存在着用户体验不高等问题。
技术实现思路
为此，需要提供一种视频通话的数据处理技术方案，用以解决现有视频电话过程中，使用用户粘性不高、用户体验差等问题。为实现上述目的，专利技术人提供了一种视频通话的数据处理装置，所述装置包括多个终端和服务器，所述终端包括第一终端和第二终端；所述第一终端包括第一视频采集单元、第一音频采集单元、第一音频效果单元、第一显示合成单元、第一编码单元和第一通本文档来自技高网...

【技术保护点】
一种视频通话的数据处理装置，其特征在于，所述装置包括多个终端和服务器，所述终端包括第一终端和第二终端；所述第一终端包括第一视频采集单元、第一音频采集单元、第一音频效果单元、第一显示合成单元、第一编码单元和第一通信单元；所述第一音频效果单元包括第一音频识别子单元、第一音频数字音效子单元和第一音频变速子单元；所述第一视频采集单元用于实时采集第一视频数据，所述第一音频采集单元用于实时采集第一音频数据；所述第一音频识别子单元用于将第一音频数据识别成第一文字数据；所述第一音频数字音效子单元将第一音频数据叠加音频数字音效；所述第一音频变速子单元将第一音频数据叠加变速不变调效果；所述第一显示合成单元用于将第...

【技术特征摘要】
1.一种视频通话的数据处理装置，其特征在于，所述装置包括多个终端和服务器，所述终端包括第一终端和第二终端；所述第一终端包括第一视频采集单元、第一音频采集单元、第一音频效果单元、第一显示合成单元、第一编码单元和第一通信单元；所述第一音频效果单元包括第一音频识别子单元、第一音频数字音效子单元和第一音频变速子单元；所述第一视频采集单元用于实时采集第一视频数据，所述第一音频采集单元用于实时采集第一音频数据；所述第一音频识别子单元用于将第一音频数据识别成第一文字数据；所述第一音频数字音效子单元将第一音频数据叠加音频数字音效；所述第一音频变速子单元将第一音频数据叠加变速不变调效果；所述第一显示合成单元用于将第一文字数据与第一视频数据进行合成，得到第一合成数据；所述第一编码单元用于将第一音频数据按照预设音频格式进行编码压缩，得到第一音频编码数据；并用于将第一合成数据按照预设视频格式进行编码压缩，得到第一视频编码数据；以及用于将第一音频编码数据和第一视频编码数据按照预设传输格式打包，得到第一编码多媒体数据；所述第一通信单元用于将第一编码多媒体数据发送至第二终端。2.如权利要求1所述的视频通话的数据处理装置，其特征在于，所述第一终端还包括第一显示单元；所述第二终端包括第二视频采集单元、第二音频采集单元、第二音频效果单元、第二显示合成单元、第二编码单元、第二通信单元和第二显示单元；所述第二音频效果单元包括第二音频识别子单元、第二音频数字音效子单元和第二音频变速子单元；所述第二视频采集单元用于实时采集第二视频数据，所述第二音频采集单元用于实时采集第二音频数据；所述第二音频识别子单元用于将第二音频数据识别成第二文字数据；所述第二音频数字音效子单元用于将第二音频数据叠加音频数字音效；所述第二音频变速子单元用于将第二音频数据叠加变速不变调效果；所述第二显示合成单元用于将第二文字数据与第二视频数据进行合成，得到第二合成数据；所述第二编码单元用于将第二音频数据按照预设音频格式进行编码压缩，得到第二音频编码数据；并用于将第二合成数据按照预设视频格式进行编码压缩，得到第二视频编码数据；以及用于将第二音频编码数据和第二视频编码数据按照预设传输格式打包，得到第二编码多媒体数据；所述第二通信单元用于将第二编码多媒体数据发送至第一终端；所述第一显示单元用于显示第二编码多媒体数据，第二显示单元用于显示第一编码多媒体数据。3.如权利要求1所述的视频通话的数据处理装置，其特征在于，所述第一终端还包括第一文字效果渲染单元和第一视频效果渲染单元；所述第一文字效果渲染单元用于接收第一渲染指令，并对第一文字数据进行效果渲染；所述第一视频效果渲染单元用于接收第二渲染指令，并对第一视频数据进行效果渲染；所述第一显示合成单元用于将渲染后的第一文字数据与渲染后的视频数据进行合成，得到第一合成数据。4.如权利要求3所述的视频通话的数据处理装置，其特征在于，服务器包括存储单元，所述存储单元用于存储文字效果渲染模板；所述第一终端包括第一文字渲染模板获取单元；所述第一文字渲染模板获取单元用于接收文字模板获取指令，从所述服务器获取对应的文字效果渲染模板；所述第一文字效果渲染单元用于根据所获取的文字效果渲染模板对第一文字数据进行效果渲染。5.如权利要求3所述的视频通话的数据处理装置，其特征在于，服务器包括存储单元，所述存储单元还用于存储视频效果渲染模板；所述第一终端包括第一视频渲染模板获取单元；所述第一视频渲染模板获取单元用于接收视频模板获取指令，从所述服务器获取对应的视频效果渲染模板；所述第一视频效果渲染单元用于根据所...

【专利技术属性】
技术研发人员：许含瑞，陈泗勇，
申请(专利权)人：福州瑞芯微电子股份有限公司，
类型：发明
国别省市：福建,35