【技术实现步骤摘要】
低带宽视频会议实现方法、系统及装置
[0001]本申请涉及流媒体
，特别涉及低带宽视频会议实现方法、系统及装置。
技术介绍
[0002]现有视频会议中，视频图像画面采用H264等视频压缩算法编码后，再进行传输。比如，将需要发送的视频图像序列划分为多个图像组，每个图像组包括x个图像帧，每个图像组以第一个图像帧作为关键帧；在对每一图像组进行编码时，可采用帧内编码算法先对其中关键帧进行编码，得到编码后的关键帧，而剩余x
‑
1个图像帧，以关键帧为编码参考进行编码运算；之后，将编码后的关键帧和x
‑
1个编码后的图像帧均发送到解码端。
[0003]在目前这种视频图像传输方式中，由于关键帧不参考其他帧，而是采用帧内编码算法进行编码，其会导致编码后的关键帧的数据量非常大，远大于每个编码后的图像帧的数据量；并且，在视频图像传输中，每个图像组均需要传输一次编码后的关键帧，其会导致编码后的关键帧的数据占总码流的比例较高，常常会导致视频会议系统中带宽不足，进而导致在线人数限制以及视频卡顿等现象。
【技术保护点】
【技术特征摘要】
1.一种低带宽视频会议实现方法，其特征在于，所述方法应用于编码端，包括：针对当前视频会议的原始视频流，在首次向解码端传输时，向解码端传输已从所述原始视频流中选择的待驱动图片、以及所述待驱动图片的融合信息；所述待驱动图片的融合信息用于解码端合成视频流；在第n次传输时，n表示非首次之外的任一次，向解码端传输所述原始视频流中第n帧图片相对于所述待驱动图片的人脸相对运动信息；所述人脸相对运动信息是指所述第n帧图片和所述待驱动图片中同一人脸的相对运动信息，所述人脸相对运动信息是基于第n帧图片的融合信息和待驱动图片的融合信息确定。2.根据权利要求1所述的方法，其特征在于，所述待驱动图片的融合信息是基于所述待驱动图片中人体头肩区域确定出的区域转换矩阵和人脸表情变化量确定；所述第n帧图片的融合信息是基于第n帧帧图片中人体头肩区域确定出的区域转换矩阵和人脸表情变化量确定；其中，区域转换矩阵用于将人体头肩区域中K个人脸关键点坐标信息从人体头肩区域转换至指定区域。3.根据权利要求2所述的方法，其特征在于，所述区域转换矩阵通过雅可比矩阵表示。4.根据权利要求2所述的方法，其特征在于，所述人脸表情变化量通过以下方式确定：针对每一人体头肩区域，将该人体头肩区域输入至已训练出的人头姿态检测模型，得到该人体头肩区域对应的人脸表情变化量。5.根据权利要求2至4任一所述的方法，其特征在于，所述待驱动图片的融合信息通过(x
s，k
、w
s，k
)表示，x
s，k
表示待驱动图片的融合信息中的关键点坐标信息，w
s，k
表示待驱动图片的融合信息中的区域转换矩阵，其中，x
s，k
、w
s，k
通过以下方式确定：x
s，k
＝R
s
x
c，k
+t
s
+δ
s，k
；w
s，k
＝R
s
w
c，k
；其中，R
s
表示已获得的人体头肩区域对应的人头旋转矩阵，x
c，k
表示人体头肩区域中K个人脸关键点坐标信息，t
s
表示已获得的人体头肩区域对应的平移向量，δ
s，k
表示人脸表情变化量，w
c，k
表示区域转换矩阵；所述第n帧图片的融合信息通过(x
dn，k
、w
dn，k
)表示，x
dn，k
表示第n帧图片的融合信息中的关键点坐标信息，W
dn，k
表示第n帧图片的融合信息中的区域转换矩阵，x
dn，k
、w
dn，k
通过以下方式确定：x
dn，k
＝R
dn
x
c，k
+t
dn
+δ
dn，k
；w
dn，k
＝R
dn
w
c，k
；其中，R
dn
表示已获得的人体头肩区域对应的人头旋转矩阵，x
c，k
表示人体头肩区域中K个人脸关键点坐标信息，t
dn
表示已获得的人体头肩区域对应的平移向量，δ
dn，k
表示人脸表情变化量。6.根据权利要求2至4任一所述的方法，其特征在于，第n帧图片相对于原始视频流中待驱动图片的人脸相对运动信息通过(x
mn，k
、w
mn，k
)表示，其中，x
mn，k
、w
mn，k
通过下式确定：x
mn，k
＝x
dn，k
‑
x
d1，k
+x
s，k
；w
mn，k
＝w
dn，k
×
w
d1，k
‑1×
w
s，k
＝w
dn...
【专利技术属性】
技术研发人员：陈昀，
申请(专利权)人：杭州萤石软件有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。