低码流的视频会议系统及方法、发送端设备、接收端设备技术方案

本发明专利技术公开了一种低码流的视频会议系统，根据从提取的音频特征、视频特征及接收的局部动态图像整理合成出原始视频数据并播放音频数据。本发明专利技术还公开了一种低码流的视频会议数据传输方法，根据从提取的音频特征、视频特征及接收的局部动态图像整理合成出原始视频数据并播放音频数据。本发明专利技术还公开了一种低码流的视频会议系统的发送端设备，用于形成音频特征映射和视频特征映射，获取局部动态图像后传输。本发明专利技术还公开了一种低码流的视频会议系统的接收端设备，用于根据提取的音频特征、视频特征及接收的局部动态图像整理合成出原始视频数据并播放音频数据。采用本发明专利技术，能节约带宽，以满足日益增长的视频会议业务需求。

Low bit stream video conference system and method, transmitting terminal device and receiving terminal device

The invention discloses a video conference system with low bit stream, which extracts original video data and plays audio data according to the extracted audio characteristics, video features and received local dynamic images. The invention also discloses a data transmission method for low bit rate video conference, according to the audio characteristics, extract video features and local dynamic image receiving arrangement of synthesized original video data and audio data. The invention also discloses a sending device of a low bit stream video conference system, which is used for forming audio characteristic mapping and video feature mapping, and acquiring local dynamic images to be transmitted later. The invention also discloses a receiving device of a video conference system for low bit rate, according to the characteristics of audio, video and local feature extraction dynamic image receiving arrangement of synthesized original video data and audio data. The invention can save bandwidth to meet the increasing demand of video conference service.

【技术实现步骤摘要】

本专利技术涉及多媒体通信领域，尤其涉及一种低码流的视频会议系统及低码流的视频会议数据传输方法、发送端设备、接收端设备。
技术介绍
视频会议系统用于召开远程、多点及实时的会议，实现多点之间视频和声音的传输和交互。视频会议系统主要由终端和微控制单元(MCU，MicroControllerUnit)组成。在一个小型的视频会议系统中，通常由多个终端集中连接至一个MCU上，组成星型拓扑结构网络。终端是用户端设备，配有显示器、摄像机、扬声器、麦克风等多媒体部件；MCU是系统端设备，集中对各终端的多媒体信息进行交换和处理。视频会议系统，可以说是集网络、视频和音频为一体的系统，对网络要求非常高。网络带宽实际上是整个视频会议的基础，其在视频会议中的使用也比较复杂，因为不同的需求产生不同的带宽要求。比如，参会人的多少，发言人的多少，图像的大小，很多用户希望尽可能采用大分辨率的图像，640×480的分辨率和320×240的分辨率比，数据量要增大4倍，20个会场和10个会场比数据量也大一本文档来自技高网...

【技术保护点】
一种低码流的视频会议系统，其特征在于，该系统，用于在发送端获取音频数据和视频数据并分别形成音频特征映射和视频特征映射，获取局部动态图像；发送端传输音频数据和局部动态图像到接收端，接收端根据从本端的音频特征映射和视频特征映射中提取的音频特征、视频特征及接收的所述局部动态图像整理合成出原始视频数据并播放音频数据。

【技术特征摘要】
1.一种低码流的视频会议系统，其特征在于，该系统，用于在发送端获取
音频数据和视频数据并分别形成音频特征映射和视频特征映射，获取局部动态
图像；发送端传输音频数据和局部动态图像到接收端，接收端根据从本端的音
频特征映射和视频特征映射中提取的音频特征、视频特征及接收的所述局部动
态图像整理合成出原始视频数据并播放音频数据。
2.根据权利要求1所述的系统，其特征在于，该系统包括：采集单元、识
别单元、特征映射单元、发送单元、接收单元、特征提取比对单元、数据合成
输出单元；其中，
所述采集单元，用于采集音频数据和视频数据，将采集的音频数据和视频
数据发送给识别单元；
所述识别单元，用于识别出发言者身份，对采集的音频数据进行语音识别
并获取音频特征，对采集的视频数据进行图像识别并获取视频特征和局部动态
图像，将音频特征、视频特征和局部动态图像发送给特征映射单元；
所述特征映射单元，用于查询是否已经存在音频特征映射和视频特征映射，
如果查询不到，则根据所述音频特征和所述视频特征分别生成音频特征映射和
视频特征映射；
所述发送单元，用于发送音频数据和局部动态图像，音频数据的编码中携
带所述发言者身份；
所述接收单元，用于接收音频数据和局部动态图像；
所述特征提取比对单元，用于从音频数据的编码中提取出所述发言者身份，
查询已经存在的音频特征映射和视频特征映射，根据所述发言者身份从音频特
征映射中提取出音频特征，从视频特征映射中提取出视频特征；
所述数据合成输出单元，用于采用提取出的视频特征和接收的局部动态图
像合成还原出原始视频数据，并结合音频特征输出音频数据和原始视频数据。
3.根据权利要求2所述的系统，其特征在于，所述识别单元，进一步用于

\t识别出发言者身份和发言者当前参与会议的会议号，由所述发言者身份和所述
会议号形成身份识别码，由所述身份识别码标识与采集的音频数据和视频数据
对应的身份特征；或者，仅由所述发言者身份标识所述身份特征。
4.根据权利要求2所述的系统，其特征在于，所述特征映射单元，进一步
用于在发送端本地和网络数据库进行所述查询，在本地查询到的情况，采用本
地的音频特征映射和视频特征映射；在网络数据库查询到的情况，从网络数据
库下载音频特征映射和视频特征映射到本地；在本地和网络数据库都查询不到
的情况，在本地生成音频特征映射和视频特征映射。
5.根据权利要求2所述的系统，其特征在于，所述音频特征映射由发言者
身份和与所述发言者身份对应的音频特征组成；或者，所述音频特征映射由身
份识别码和与所述身份识别码对应的音频特征组成，所述身份识别码由发言者
身份和会议号形成。
6.根据权利要求2所述的系统，其特征在于，所述视频特征映射由发言者
身份和与所述发言者身份对应的视频特征组成；或者，所述视频特征映射由身
份识别码和与所述身份识别码对应的视频特征组成，所述身份识别码由发言者
身份和会议号形成。
7.根据权利要求1至6中任一项所述的系统，其特征在于，所述局部动态
图像具体包括：发言者的头部运动、眼球运动、手势、轮廓运动中的至少一种
轨迹图像信息。
8.一种低码流的视频会议数据传输方法，其特征在于，该方法包括：
发送端获取音频数据和视频数据并分别形成音频特征映射和视频特征映
射，获取局部动态图像，传输音频数据和局部动态图像到接收端；
接收端根据从本端的音频特征映射和视频特征映射中提取的音频特征、视
频特征及接收的所述局部动态图像整理合成出原始视频数据并播放音频数据...

【专利技术属性】
技术研发人员：李霞，付贤会，张凯，修岩，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：广东;44