一种基于图像分割的视频会议系统编码传输方法技术方案

本发明专利技术提供一种基于图像分割的视频会议系统编码传输方法，包括：编码流程开始时，根据实时检测到的网络条件，对预先设定的变化域值进行实时调节，从而得到与当前网络条件相适配的图像单元变化域值；编码端对图像帧进行人脸识别和分割，分割成人脸图像和背景图像，同时得到人脸图像在背景图像上面的位置信息；对人脸图像进行编码，并和位置信息打包发送给解码端；对于背景图像，如果前后背景图像的变化程度不超过图像单元变化域值，则不编码和发送；否则进行编码和发送；解码端进行解码。本发明专利技术达到在网络带宽有限的情况下，自动调节编码，减少视频通讯需要的码率，同时保证视频通讯中的重要信息即：人脸图像的流畅性，避免卡顿现象。

【技术实现步骤摘要】
一种基于图像分割的视频会议系统编码传输方法
本专利技术属于视频编码传输
，具体涉及一种基于图像分割的视频会议系统编码传输方法。
技术介绍
视频会议系统是一种基于网络的多媒体通信系统，其核心功能是多人视频通讯，目前，主要采用以下方式实现：对于每个会议人，实时采集视频图像，其中，每帧视频图像同时包含人脸图像以及背景图像；然后，对采集到的每帧视频图像进行编码，再将编码后的视频图像发送给其他会议人。上述视频会议系统具有以下问题：传输的每帧编码后的视频图像会占用较多的码率，因此，在带宽一定的条件下，多人同时在线时常常发生带宽不够的情况，从而导致图像模糊以及视频卡顿，影响会议体验。
技术实现思路
针对现有技术存在的缺陷，本专利技术提供一种基于图像分割的视频会议系统编码传输方法，可有效解决上述问题。本专利技术采用的技术方案如下：本专利技术提供一种基于图像分割的视频会议系统编码传输方法，包括以下步骤：步骤1，编码端对摄像头采集的图像序列进行实时编码并传输给解码端，具体包括：步骤1.1，当编码流程本文档来自技高网...

【技术保护点】
1.一种基于图像分割的视频会议系统编码传输方法，其特征在于，包括以下步骤：/n步骤1，编码端对摄像头采集的图像序列进行实时编码并传输给解码端，具体包括：/n步骤1.1，当编码流程开始时，变化域值调节模块根据实时检测到的网络条件，对预先设定的变化域值进行实时调节，从而得到与当前网络条件相适配的图像单元变化域值d；/n编码端实时接收摄像头采集的原视频图像序列；所述原视频图像序列由多个图像帧按次序组成；其中，每个图像帧均具有唯一的图像帧序列号；图像帧序列号从1开始逐渐增加；/n步骤1.2，每当编码端接收到图像帧i时，其中，i为图像帧序列号，编码端对图像帧i进行人脸识别，检测出图像帧i的人脸区域，然后...

【技术特征摘要】
1.一种基于图像分割的视频会议系统编码传输方法，其特征在于，包括以下步骤：
步骤1，编码端对摄像头采集的图像序列进行实时编码并传输给解码端，具体包括：
步骤1.1，当编码流程开始时，变化域值调节模块根据实时检测到的网络条件，对预先设定的变化域值进行实时调节，从而得到与当前网络条件相适配的图像单元变化域值d；
编码端实时接收摄像头采集的原视频图像序列；所述原视频图像序列由多个图像帧按次序组成；其中，每个图像帧均具有唯一的图像帧序列号；图像帧序列号从1开始逐渐增加；
步骤1.2，每当编码端接收到图像帧i时，其中，i为图像帧序列号，编码端对图像帧i进行人脸识别，检测出图像帧i的人脸区域，然后，根据人脸区域，将图像帧i分割成人脸图像Ai和背景图像Bi，同时得到人脸图像Ai在背景图像Bi上面的位置信息Pi；
步骤1.3，对于人脸图像Ai，编码端对人脸图像Ai进行视频压缩编码，得到人脸图像码流Mai；然后将人脸图像码流Mai和位置信息Pi打包，得到人脸图像码流数据包Ei，并将人脸图像码流数据包Ei传输给解码端；
对于背景图像Bi，编码端判断当前的背景图像Bi对应的图像帧序列号i是否为1，如果等于1，则编码端对背景图像Bi进行视频压缩编码，得到背景图像码流Mbi；然后将背景图像码流Mbi和位置信息Pi打包，得到背景图像码流数据包Fi，并将背景图像码流数据包Fi传输给解码端；
如果不等于1，则编码端比较背景图像Bi与前一帧的背景图像Bi-1，得到背景图像变化程度，并判断背景图像变化程度是否超过步骤1.1实时得到的图像单元变化域值d，如果不超过，则背景图像Bi不满足编码条件，对背景图像Bi不进行编码处理，也不发送给解码端；如果超过，则对背景图像Bi进行视频压缩编码，得到背景图像码流Mbi；然后将背景图像码流Mbi和位置信息Pi打包，得到背景图像码流数据包Fi，并将背景图像码流数据包Fi传输给解码端；
步骤2，解码端对接收到的来自于编码端的人脸图像码流数据包Ei和背景图像码流数据包Fi进行解码操作，具体包括：
步骤2.1，当解码端接收到来自于编码端的第1个背景图像码流数据包Fj时，其中，j为第1个背景图像码流数据包对应的图像帧序列号，解码端对背景图像码流数据包Fj进行视频解码操作，得到解码背景图像Gj以及对应的位置信息Pj；并在本地存储单元中保存解码背...

【专利技术属性】
技术研发人员：张吾进，洪雪荣，翟青林，张燕威，
申请(专利权)人：上海纽菲斯信息科技有限公司，
类型：发明
国别省市：上海;31