多用户共享视频画面的视频流串流方法、装置、设备制造方法及图纸

技术编号:28493370 阅读:15 留言:0更新日期:2021-05-19 22:21
本发明专利技术公开了一种多用户共享视频画面的视频流串流方法,包括预先将多个客户端划分为主客户端和从客户端;实时获得视频帧图像;基于根据主客户端的硬件配置和网络情况确定的第一视频质量参数,利用第一编码器对视频帧图像进行编码,获得第一视频流,并将第一视频流发送至主客户端;基于从客户端的第二视频质量参数,利用第二编码器对视频帧图像进行编码,获得第二视频流,并将第二视频流发送至从客户端。本申请中将多个客户端分为主客户端和从客户端,针对不同类型的客户端提供更合适的视频流,从而改善客户端例如卡顿等问题,提升用户观看视频画面的观看体验。本申请还提供了一种多用户共享视频画面的视频流串流装置、设备,具有上述有益效果。具有上述有益效果。具有上述有益效果。

【技术实现步骤摘要】
多用户共享视频画面的视频流串流方法、装置、设备


[0001]本专利技术涉及多用户共享视频画面
,特别是涉及一种多用户共享视频画面的视频流串流方法、装置、设备。

技术介绍

[0002]WebRTC可以支持多个用户共享视频画面,使用主机端同一个视频流可以同时串流到多个用户的客户端。但是因为每个用户的客户端的网络情况以及硬件配置各不相同,采用将相同的视频流同时串流到各个用户的客户端时,若是某些客户端网络情况较差或者硬件配置性能不足,会导致客户端的视频流显示播放过程中出现卡顿或模糊。
[0003]现有的技术中,可以采用SVC(Scalable Video Coding,可伸缩视频编码)方式,使用一个编码器编出不同的视频流,尽管这种编码方式能够编码出多种不同的视频流,但是编码过程过于复杂,且编码出的每种视频流在各个客户端之间如何分配串流过程也较为复杂。

技术实现思路

[0004]本专利技术的目的是提供一种多用户共享视频画面的视频流串流方法、装置、设备,能够在一定程度上满足不同客户端对视频质量的不同要求。
[0005]为解决上述技术问题,本专利技术提供一种多用户共享视频画面的视频流串流方法,包括:
[0006]预先将多个客户端按照不同的视频流质量要求划分为主客户端和从客户端;
[0007]实时获得视频帧图像;
[0008]基于第一视频质量参数,利用第一编码器对所述视频帧图像进行编码,获得第一视频流,并将所述第一视频流发送至所述主客户端;其中,所述第一视频质量参数为根据所述主客户端的硬件配置和网络情况确定的参数;
[0009]基于第二视频质量参数,利用第二编码器对所述视频帧图像进行编码,获得第二视频流,并将所述第二视频流发送至所述从客户端;其中,所述第二视频质量参数为根据所述从客户端的硬件配置和网络情况确定的参数。
[0010]可选地,根据所述主客户端的硬件配置和网络情况确定第一视频质量参数的过程,包括:
[0011]检测获得主客户端对应的至少包括网络带宽、丢包比例、延迟时长、图像渲染时间、图像编码时间以及I帧请求频率的网络状况信息;
[0012]当所述延迟时长、所述图像渲染时间以及所述图像编码时间均不大于对应的时间阈值时,则所述第一视频质量参数的帧数为所述主客户端的理论可解码帧数;
[0013]当所述丢包比例小于预设比例且所述I帧请求频率小于预设频率阈值时,则所述第一视频质量参数的视频码率的大小等于所述网络带宽的大小;
[0014]根据所述主客户端可解码编码格式设定所述第一视频质量参数中的编码类型。
[0015]可选地,根据所述主客户端的硬件配置和网络情况确定第一视频质量参数的过程,包括:
[0016]当所述延迟时长、所述图像渲染时间以及所述图像编码时间中任意一项大于对应的时间阈值时,则所述第一视频质量参数的帧数为所述主客户端的所述理论可解码帧数的一半,且在第一预设时长之后,将所述第一视频质量参数的帧数调整为所述理论可解码帧数;
[0017]当所述I帧请求频率不小于预设频率阈值时,则所述第一视频质量参数的视频码率设定为小于当前的所述网络带宽的预设码率,并在第二预设时长之后,将所述第一视频质量参数的视频码率调整为等于当前的所述网络带宽。
[0018]可选地,将所述第一视频流发送至所述主客户端之后,还包括:
[0019]接收所述主客户端解码所述第一视频流的解码时间和解码帧序号;
[0020][0021]若所述解码时间超过预设时长或解码帧序号的数量小于预设数量,则减小所述第一视频质量参数的视频码率。
[0022]可选地,将多个客户端按照不同的视频流质量要求划分为主客户端和从客户端,包括:
[0023]将第一个接入的客户端设定为视频流质量要求高的主客户端,将主客户端之后接入的客户端设定为视频流质量要求低的从客户端。
[0024]可选地,根据所述从客户端的硬件配置和网络情况确定第二视频质量参数的过程,包括:
[0025]根据每个从客户端的硬件配置和网络情况,确定每个所述从客户端对应的视频质量参数;
[0026]以各个所述从客户端对应的视频质量参数中最小帧数、最小视频码率以及最低性能编码类型分别作为第二视频质量参数的帧数、视频码率以及编码类型。
[0027]可选地,还包括:
[0028]当存在新的从客户端接入或存在从客户端退出时,根据当前接入的所有从客户端的对应的所述视频质量参数,重新确定所述第二视频质量参数。
[0029]可选地,还包括:
[0030]当接收到所述从客户端输入的视频码率变更请求时,判断所述从客户端对应的视频码率是否为所有所述从客户端的视频码率中最小视频码率,若是,则以所述从客户端输入的视频码率作为所述从客户端的视频质量参数的视频码率,并重新确定各个所述从客户端的第二视频质量参数中的视频码率;
[0031]当接收到所述从客户端输入的帧数变更请求时,判断所述从客户端对应的帧数是否为所有所述从客户端的帧数中最小帧数,若是,则以所述从客户端输入的帧数作为所述从客户端的视频质量参数的帧数,并重新确定各个所述从客户端的第二视频质量参数中的帧数。
[0032]本申请还提供了一种多用户共享视频画面的视频流串流装置,包括:
[0033]客户端划分模块,用于预先将多个客户端按照不同的视频流质量要求划分为主客户端和从客户端;
[0034]帧图像模块,用于实时获得视频帧图像;
[0035]第一编码模块,用于基于第一视频质量参数,利用第一编码器对所述视频帧图像进行编码,获得第一视频流,并将所述第一视频流发送至所述主客户端;其中,所述第一视频质量参数为根据所述主客户端的硬件配置和网络情况确定的参数;
[0036]第二编码模块,用于基于第二视频质量参数,利用第二编码器对所述视频帧图像进行编码,获得第二视频流,并将所述第二视频流发送至所述从客户端;其中,所述第二视频质量参数为根据所述从客户端的硬件配置和网络情况确定的参数。
[0037]本申请还提供了一种多用户共享视频画面的视频流串流设备,包括:
[0038]存储器,用于存储计算机程序;
[0039]处理器,用于执行所述计算机程序以实现如上任一项所述多用户共享视频画面的视频流串流方法的步骤。
[0040]本专利技术所提供的多用户共享视频画面的视频流串流方法,包括预先将多个客户端按照不同的视频流质量要求划分为主客户端和从客户端;实时获得视频帧图像;基于第一视频质量参数,利用第一编码器对视频帧图像进行编码,获得第一视频流,并将第一视频流发送至主客户端;其中,第一视频质量参数为根据主客户端的硬件配置和网络情况确定的参数;基于第二视频质量参数,利用第二编码器对视频帧图像进行编码,获得第二视频流,并将第二视频流发送至从客户端;其中,第二视频质量参数为根据从客户端的硬件配置和网络情况确定的参数。
[0041]本申请中将多个用户的客户端分为主客户端和从客本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种多用户共享视频画面的视频流串流方法,其特征在于,包括:预先将多个客户端按照不同的视频流质量要求划分为主客户端和从客户端;实时获得视频帧图像;基于第一视频质量参数,利用第一编码器对所述视频帧图像进行编码,获得第一视频流,并将所述第一视频流发送至所述主客户端;其中,所述第一视频质量参数为根据所述主客户端的硬件配置和网络情况确定的参数;基于第二视频质量参数,利用第二编码器对所述视频帧图像进行编码,获得第二视频流,并将所述第二视频流发送至所述从客户端;其中,所述第二视频质量参数为根据所述从客户端的硬件配置和网络情况确定的参数。2.如权利要求1所述的多用户共享视频画面的视频流串流方法,其特征在于,根据所述主客户端的硬件配置和网络情况确定第一视频质量参数的过程,包括:检测获得所述主客户端对应的至少包括网络带宽、丢包比例、延迟时长、图像渲染时间、图像编码时间以及I帧请求频率的网络状况信息;当所述延迟时长、所述图像渲染时间以及所述图像编码时间均不大于对应的时间阈值时,则所述第一视频质量参数的帧数为所述主客户端的理论可解码帧数;当所述丢包比例小于预设比例且所述I帧请求频率小于预设频率阈值时,则所述第一视频质量参数的视频码率的大小等于所述网络带宽的大小;根据所述主客户端可解码编码格式设定所述第一视频质量参数中的编码类型。3.如权利要求2所述的多用户共享视频画面的视频流串流方法,其特征在于,根据所述主客户端的硬件配置和网络情况确定第一视频质量参数的过程,包括:当所述延迟时长、所述图像渲染时间以及所述图像编码时间中任意一项大于对应的时间阈值时,则所述第一视频质量参数的帧数为所述主客户端的所述理论可解码帧数的一半,且在第一预设时长之后,将所述第一视频质量参数的帧数调整为所述理论可解码帧数;当所述I帧请求频率不小于预设频率阈值时,则所述第一视频质量参数的视频码率设定为小于当前的所述网络带宽的预设码率,并在第二预设时长之后,将所述第一视频质量参数的视频码率调整为等于当前的所述网络带宽。4.如权利要求2所述的多用户共享视频画面的视频流串流方法,其特征在于,将所述第一视频流发送至所述主客户端之后,还包括:接收所述主客户端解码所述第一视频流的解码时间和解码帧序号;若所述解码时间超过预设时长或解码帧序号的数量小于预设数量,则减小所述第一视频质量参数的视频码率。5.如权利要求1所述的多用户共享视频画面的视频流串流方法,其特征在于,将多个客户端按照不同的视频流质量要求划分为主客户端...

【专利技术属性】
技术研发人员:陶文涛罗光辉史孝兵陈涛涂振南郑宇王叶群
申请(专利权)人:杭州雾联科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1