多终端多语言实时视频群内私聊的方法及系统技术方案

本发明专利技术公开了一种实现多终端多语言实时视频群内私聊的方法及系统，移动终端在聊天群组里的移动终端中选定至少一个私聊的第二移动终端并采集视频流、音频流和时间戳进行压缩分别发送至流媒体服务器和识别服务器，业务服务器向数据库服务器请求查询其他移动终端的预留信息以判断是否需要进行语言翻译并建立直接通信路径，当需要进行翻译时识别服务器将第一音频流转码为第一语言文本并由翻译服务器进行翻译为第二语言文本，并由合成服务器转换为第二音频流并发送至流媒体服务器，混流服务器像流媒体服务器调取视频流及第二音频流混流成第二视频文件，并发送至其他移动终端，使不同的移动终端之间能实现无语言障碍的多终端多语言实时视频群内私聊。

Method and System of Multi-terminal Multi-language Real-time Video Group Private Chat

The invention discloses a method and system for realizing private chat in multi-terminal multi-language real-time video group. The mobile terminal selects at least one second mobile terminal for private chat in the mobile terminal of the chat group and collects video stream, audio stream and time stamp to compress and send them to streaming media server and identification server respectively. The business server requests other queries from the database server. The reservation information of mobile terminal determines whether language translation is needed and establishes direct communication path. When translation is needed, the identification server translates the first audio stream into the first language text and the translation server translates the first audio stream into the second language text. The synthesis server converts the second audio stream and sends it to the streaming media server. The mixed-stream server acts as a streaming media service. It mixes the video stream and the second audio stream into the second video file and transmits it to other mobile terminals, which enables different mobile terminals to chat with each other in real-time multi-terminal multi-language video group without language barrier.

【技术实现步骤摘要】
多终端多语言实时视频群内私聊的方法及系统
本专利技术涉及实时群聊翻译
，尤其涉及一种多终端多语言实时视频群内私聊的方法及系统。
技术介绍
日常生活或商务活动中，随着互联网技术的普及，不同国家(地区)的终端能够通过移动终端同时进行视频聊天对话或视频会议，但不同国家(地区)的人使用的语言也不同，当需要已未掌握的语言进行实时视频交流就会存在着语言的沟通障碍，现在虽然有各种各样的翻译工具，但都是对文本进行翻译或者只是单纯的语音实时翻译，虽然有视频翻译工具，但是都是对录制视频的翻译，暂时还没有可以实现多终端多语言实时视频群内私聊的工具或系统。
技术实现思路
本专利技术要解决的技术问题在于，针对现有技术的上述缺陷，提供一种多终端多语言实时视频群内私聊的方法和系统。本专利技术解决其技术问题所采用的技术方案是：根据本专利技术的一方面，提供一种多终端多语言实时视频群内私聊的方法，包括以下步骤：S10：第一移动终端在群组里选定私聊的至少一个第二移动终端；S20：第一移动终端同时采集视频流、第一音频流及其对应的时间戳，将视频流及时间戳发送至流媒体服务器，以及将第一音频流发送至识别服务器；S30：业务服务本文档来自技高网...

【技术保护点】
1.一种多终端多语言实时视频群内私聊的方法，其特征在于，包括以下步骤：S10：第一移动终端在群组里选定私聊的至少一个第二移动终端；S20：所述第一移动终端同时采集视频流、第一音频流及其对应的时间戳，将所述视频流及时间戳发送至流媒体服务器，以及将所述第一音频流发送至识别服务器；S30：业务服务器向所述数据库服务器请求查询选定的至少一个所述第二移动终端的身份信息、第二语言信息以及相互间的链接信息，建立直接通信路径，并判断所述第一语言信息和所述第二语言信息是否相同，若不相同，则执行步骤S40，若相同，则执行步骤S70；S40：所述识别服务器将所述第一音频流识别为第一语言文本，并发送至翻译服务器；S5...

【技术特征摘要】
1.一种多终端多语言实时视频群内私聊的方法，其特征在于，包括以下步骤：S10：第一移动终端在群组里选定私聊的至少一个第二移动终端；S20：所述第一移动终端同时采集视频流、第一音频流及其对应的时间戳，将所述视频流及时间戳发送至流媒体服务器，以及将所述第一音频流发送至识别服务器；S30：业务服务器向所述数据库服务器请求查询选定的至少一个所述第二移动终端的身份信息、第二语言信息以及相互间的链接信息，建立直接通信路径，并判断所述第一语言信息和所述第二语言信息是否相同，若不相同，则执行步骤S40，若相同，则执行步骤S70；S40：所述识别服务器将所述第一音频流识别为第一语言文本，并发送至翻译服务器；S50：所述翻译服务器将所述第一语言文本翻译为至少一种第二语言文本，并发送至合成服务器；S60：所述合成服务器将至少一种所述第二语言文本合成为至少一种第二音频流，并发送至所述流媒体服务器；S70：混流服务器从所述流媒体服务器调取所述视频流及至少一种所述第二音频流，并根据所述时间戳将所述视频流及至少一种所述第二音频流混流成至少一种第二视频文件，并通过所述直接通信路径对应分别发送至至少一个所述第二移动终端；S80：至少一个所述第二移动终端解码所述至少一种第二视频文件并播放。2.根据权利要求1所述的多终端多语言实时视频群内私聊的方法，其特征在于，还包括步骤：S01：将所述第一移动终端与至少两个所述第二移动终端建立群组，并将所述群组中的所述第一移动终端与至少一个所述第二移动终端的身份信息、语言信息以及相互间的链接信息发送至所述数据库服务器；选定私聊的所述第二移动终端个数少于群组内的全部移动终端的个数。3.根据权利要求1所述的多终端多语言实时视频群内私聊的方法，其特征在于，所述S20：第一移动终端采集视频流、第一音频流及其对应的时间戳，还可以为：S21：所述第一移动终端采集获取第一视频文件；S22：所述第一移动终端将所述第一视频文件分解为所述视频流、第一音频流及其对应的时间戳。4.根据权利要求3所述的多终端多语言实时视频群内私聊的方法，其特征在于，所述S50，还包括步骤：S51：所述翻译服务器将所述第一语言文本及至少一种所述第二语言文本，并发送至所述流媒体服务器；所述S70，还包括步骤：S71：所述混流服务器将所述视频流、至少一种所述第二语言文本和至少一种第二音频流合成为带至少一种第二语言字幕的至少一个所述第二视频文件；或者S72：所述混流服务器将所述视频流、第一语言文本、至少一种第二语言文本和至少一种第二音频流合成为带第一语言字幕和至少一种第二语言字幕的至少一个所述第二视频文件。5.根据权利要求4所述的多终端多语言实时视频群内私聊的方法，其特征在于，还...

【专利技术属性】
技术研发人员：徐四海，万金春，曾映勇，胡生敏，赖定新，
申请(专利权)人：深圳爱为移动科技有限公司，
类型：发明
国别省市：广东,44