一种视频会议智能布局方法、装置及计算机可读存储介质制造方法及图纸

一种视频会议多屏幕智能布局方法，包括步骤：根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表；确定有序终端列表；根据参会人设置的布局，填充并固定终端视频；根据会议状态以及参会人状态确定智能终端列表，并按序填充智能终端视频；填充轮询分频区域；对轮询分屏区域进行视频轮换。在多流混屏时，优先保证会议中高优先级视频的显示需要，进而大大提升了客户端的灵活性，并按照请求对应大小对视频流，有效节省网络宽带，进而大大降低了带宽要求。

An intelligent video conference layout method, device and computer readable storage medium

【技术实现步骤摘要】
一种视频会议智能布局方法、装置及计算机可读存储介质
本专利技术涉及视频会议
，特别是涉及一种视频会议多屏幕的布局方法。
技术介绍
现有的视频会议系统，通常均具备多屏幕多画面，单屏幕显示5x5（25人）或以上的布局显示方式。但是，如果与会终端想自由观看任意视频，则需要人为通过布局管理系统将其拉入布局。作为多人视频会议客户端，传统视频会议解决方案中，面临无法满足每个客户端灵活观看任意视频的需求的问题，或者需要基于后台控制策略，交互复杂且不灵活。比如基于MCU（MultiControlUnit，多点控制单元）的视频会议系统，需要配套专用后台分屏控制单元来完成。智能布局功能就是基于这种每个与会终端都有观看任意视频的需求以及主持人希望参会人能够按照主持人要求观看特定的视频的需求而提出的一种解决方案。所谓智能布局，即基于此类场景，根据视频优先级以及布局的优先级智能的添加视频到对应位置并进行视频混屏显示。最大化的简化了参会人的交互操作。
技术实现思路
为了解决现有技术存在的不足，本专利技术的目的在于提供一种视频会议多屏幕智能布局方法，可以在多流混屏时，采用智能化布局算法，优先保证会议中高优先级视频的显示需要，并按需请求对应大小的视频流，有效节省网络带宽。为实现上述目的，本专利技术提供的视频会议多屏幕智能布局方法，包括以下步骤：根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表；确定有序终端列表；根据参会人设置的布局，填充并固定终端视频；根据会议状态以及参会人状态确定智能终端列表，并按序填充智能终端视频；填充轮询分频区域；对轮询分屏区域进行视频轮换。进一步地，所述根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表的步骤，进一步包括：对每个屏幕配置第一优先级，对每个屏幕内的分屏区域配置第二优先级；根据优第一优先级及第二优先级对所有分屏区域进行排序，来确定全部分屏区域列表。进一步地，所述确定有序终端列表的步骤，进一步包括：按照入会顺序确定包含所有终端的与会终端列表；按照顺序遍历与会终端列表，并根据视频的有无确定有序终端列表。进一步地，所述根据参会人设置的布局，填充并固定终端视频的步骤，进一步包括：根据参会人设置的布局确定固定终端列表及固定分屏区域列表；根据固定终端列表及固定分屏区域列表确定固定视频列表。进一步地，所述根据会议状态以及参会人状态确定智能终端列表，并按序填充智能终端视频的步骤，进一步包括：对智能视频设定智能视频的优先级；根据会议状态及参会人列表确定当前会议中存在的智能视频，并按照优先级排序获得智能终端列表，并且确定智能终端视频列表；根据全部分屏区域列表及固定区分屏域列表获得一次剩余有序分屏区域列表；按照顺序遍历一次剩余有序分屏区域列表及智能终端视频列表，对各分屏区域分别填充对应的智能视频，并记录填充了智能视频的分屏区域的智能视频分屏区域列表。进一步地，智能视频包括：共享视频、焦点视频、语音激励视频以及本地视频，且智能视频的优先级依次为共享视频、焦点视频、语音激励视频以及本地视频。进一步地，其特征在于，所述填充轮询分频区域的步骤，进一步包括：根据一次剩余有序分屏区域列表及智能视频分屏区域列表，获得轮询分屏区域列表；根据智能终端视频列表确定智能终端视频流列表，并根据智能终端视频流列表确定智能终端列表；根据有序终端列表、固定分频区域列表及智能终端列表，确定有序终端列表；根据有序终端列表得到其对应的轮询视频列表；按照顺序遍历轮询分屏区域列表及轮询视频列表，对轮询分屏区域填充对应的视频，并开始进行轮询计时。进一步地，其特征在于，所述对轮询分屏区域进行视频轮换的步骤，进一步包括：在到达轮询时间，且此时的轮询视频列表的数量≤轮询分屏区域列表的数量时，重新开始轮询计时，而不需要进行轮询替换，或者在到达轮询时间，且轮询视频列表的数量>轮询分屏区域列表的数量时，将轮询视频列表中的与轮询视频列表的数量减去轮询分屏区域列表Lr4的数量对应的数量的视频依次排到轮询视频列表的尾部，来获得新的轮询视频列表；按照顺序遍历新的轮询视频列表及轮询分屏区域列表，对轮询分屏区域填充对应的视频，并开始进行轮询计时。进一步地，进一步包括以下步骤：遍历全部分屏区域列表，查看是否存在没有视频的屏幕。更进一步地，所述遍历全部分屏区域列表，查看是否存在没有视频的屏幕的步骤，进一步包括：遍历全部分屏区域列表；如果发现某一屏幕上没有任何视频填充，则将本地视频填充到该屏幕的第一优先级分屏区域中；如果发现每个屏幕至少填充有一个视频，则结束进程。为实现上述目的，本专利技术还提供一种视频会议多屏幕智能布局装置，包括，存储器和处理器，所述存储器上储存有在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述的视频会议多屏幕智能布局方法的步骤。为实现上述目的，本专利技术还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序可被处理器执行上述的视频会议多屏幕智能布局方法的步骤。本专利技术的视频会议多屏幕智能布局方法，可以根据会议状态及参会人状态，评估视频权重，并对视频进行优先级排序，再按照多屏幕以及屏幕内多分屏对优先级排序，进行智能视频混屏。因此，在多流混屏时，优先保证会议中高优先级视频的显示需要，进而大大提升了客户端的灵活性，并按照请求对应大小对视频流，有效节省网络宽带，进而大大降低了带宽要求。本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。附图说明附图用来提供对本专利技术的进一步理解，并且构成说明书的一部分，并与本专利技术的实施例一起，用于解释本专利技术，并不构成对本专利技术的限制。在附图中：图1为根据本专利技术的视频会议多屏幕智能布局方法的流程图；图2A至图2F为根据本专利技术视频会议多屏幕智能布局方法的示意图。具体实施方式以下结合附图对本专利技术的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本专利技术，并不用于限定本专利技术。实施例1图1为根据本专利技术的视频会议多屏幕智能布局方法的流程图，图2A至图2F为根据本专利技术视频会议多屏幕智能布局方法的示意图，下面将参考图1及图2A至图2F，对本专利技术的视频会议多屏幕智能布局方法进行详细描述。在本实施例涉及的视频会议多屏幕智能布局方法中，字母L表示列表，字母T表示参会终端，字母V表示视频流，双字母VV表示共享流，字母R表示屏幕中的分屏区域，双字母Lt表示终端列表，双字母Lv表示视频列表，双字母Lr表示分屏区域列表。另外，用Vn表示终端Tn的视频流，用VVn表示终端Tn的共享流。在步骤101，根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表Lr。具体地本文档来自技高网...

【技术保护点】
1.一种视频会议多屏幕智能布局方法，其特征在于，包括以下步骤：/n根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表；/n确定有序终端列表；/n根据参会人设置的布局，填充并固定终端视频；/n根据会议状态以及参会人状态确定智能终端列表，并按序填充智能终端视频；/n填充轮询分频区域；/n对轮询分屏区域进行视频轮换。/n

【技术特征摘要】
1.一种视频会议多屏幕智能布局方法，其特征在于，包括以下步骤：
根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表；
确定有序终端列表；
根据参会人设置的布局，填充并固定终端视频；
根据会议状态以及参会人状态确定智能终端列表，并按序填充智能终端视频；
填充轮询分频区域；
对轮询分屏区域进行视频轮换。


2.根据权利要求1所述的视频会议多屏幕智能布局方法，其特征在于，所述根据用户屏幕数量及各个屏幕指定的布局确定全部分屏区域列表的步骤，进一步包括：
对每个屏幕配置第一优先级，对每个屏幕内的分屏区域配置第二优先级；
根据优第一优先级及第二优先级对所有分屏区域进行排序，来确定全部分屏区域列表。


3.根据权利要求1所述的视频会议多屏幕智能布局方法，其特征在于，所述确定有序终端列表的步骤，进一步包括：
按照入会顺序确定包含所有终端的与会终端列表；
按照顺序遍历与会终端列表，并根据视频的有无确定有序终端列表。


4.根据权利要求1所述的视频会议多屏幕智能布局方法，其特征在于，所述根据参会人设置的布局，填充并固定终端视频的步骤，进一步包括：
根据参会人设置的布局确定固定终端列表及固定分屏区域列表；
根据固定终端列表及固定分屏区域列表确定固定视频列表。


5.根据权利要求1所述的视频会议多屏幕智能布局方法，其特征在于，所述根据会议状态以及参会人状态确定智能终端列表，并按序填充智能终端视频的步骤，进一步包括：
对智能视频设定智能视频的优先级；
根据会议状态及参会人列表确定当前会议中存在的智能视频，并按照优先级排序获得智能终端列表，并且确定智能终端视频列表；
根据全部分屏区域列表及固定区分屏域列表获得一次剩余有序分屏区域列表；
按照顺序遍历一次剩余有序分屏区域列表及智能终端视频列表，对各分屏区域分别填充对应的智能视频，并记录填充了智能视频的分屏区域的智能视频分屏区域列表；
其中，所述智能视频，包括：共享视频、焦点视频、语音激励视频以及本地视频，且智能视频的优先级...

【专利技术属性】
技术研发人员：徐晓磊，冯文澜，
申请(专利权)人：随锐科技集团股份有限公司，
类型：发明
国别省市：北京;11