一种音视频调度方法及系统技术方案

技术编号:38193477 阅读:12 留言:0更新日期:2023-07-20 21:13
本申请涉及一种音视频调度方法及系统,方法包括与终端建立数据通讯关系;收集终端采集的视频流和音频流并在时间长度上对视频流和音频流进行分割;对音频流段进行压缩处理;对视频流段中的图像进行灰度处理,得到基准图像并对基准图像进行区域划分,得到多个子基准图像;对子基准图像进行网格划分,得到多个子基准图像单元,子基准图像单元的面积小于等于设定单位面积;对子基准图像单元进行压缩以及将经过压缩处理的视频流段和音频流段发送至终端。本申请公开的音视频调度方法及系统,通过对音频与视频进行压缩算法优化的处理方式来兼顾压缩率和压缩体积,能够在约束条件不变的情况下提高音频与视频的传输效率,用以满足即时通讯的使用需求。时通讯的使用需求。时通讯的使用需求。

【技术实现步骤摘要】
一种音视频调度方法及系统


[0001]本申请涉及数据处理
,尤其是涉及一种音视频调度方法及系统。

技术介绍

[0002]音视频调度系统由调度中心、通信网络及各种终端组成,可以为用户提供多种异构网络用户的接入能力,可以提供视音频指挥调度、监控、视音频记录的作用,还能够进行下达各种调度信息、对事发现场进行视频监控并实时记录现场视频信息和为系统中各种信息的传输提供支撑。
[0003]在即时通讯场景中,音视频调度系统中的数据流为视频流和音频流,音频流经过数字采集后,能够得到很好的压缩率,但是对于视频流而言,需要在压缩率和传输速度之间进行取舍。
[0004]压缩率过高会导致画质损失,同时还需要花费更多的处理时间,可能无法满足即时通讯的使用要求;压缩率过低则需要更多的带宽,数据传输成本会上升。普通场景下使用,可以通过提高硬件处理效率和使用大带宽甚至专用网络的方式满足即时通讯要求。但是在网络覆盖有限地区和硬件条件制约等条件下,则需要通过优化算法的方式来满足即时通讯的要求。

技术实现思路

[0005]本申请提供一种音视频调度方法及系统,通过对音频与视频进行压缩算法优化的处理方式来兼顾压缩率和压缩体积,能够在约束条件不变的情况下提高音频与视频的传输效率,用以满足即时通讯的使用需求。
[0006]本申请的上述目的是通过以下技术方案得以实现的:
[0007]第一方面,本申请提供了一种音视频调度方法,包括:
[0008]响应于获取到的连接指令,与连接指令指向的接听终端建立数据通讯关系;
[0009]将采集到的视频流和音频流并在时间长度上对视频流和音频流进行分割,得到视频流段和音频流段并添加队列标记,每一对对应的视频流段和音频流段的长度相同并且具有相同的起止截点;
[0010]对音频流段进行压缩处理;
[0011]对视频流段中的图像进行灰度处理,得到基准图像并对基准图像进行区域划分,得到多个子基准图像,区域划分过程中使用色差绘制划分线;
[0012]对子基准图像进行网格划分,得到多个子基准图像单元,子基准图像单元的面积小于等于设定单位面积;
[0013]统计每一个子基准图像单元中的灰度值数量;
[0014]根据灰度值离散度对子基准图像进行压缩,灰度值数量小于设定数量时,对子基准图像单元采用无损压缩算法,灰度值数量大于等于设定数量时,对子基准图像单元采用有损压缩算法;以及
[0015]将经过压缩处理的视频流段和音频流段发送至连接指令指向的接听终端。
[0016]在第一方面的一种可能的实现方式中,子基准图像的面积小于设定忽略面积时,将归属于该子基准图像的划分线进行舍弃处理。
[0017]在第一方面的一种可能的实现方式中,子基准图像的边缘长度小于设定忽略边缘长度时,将归属于该子基准图像的划分线进行舍弃处理。
[0018]在第一方面的一种可能的实现方式中,当一个子基准图像位于另一个子基准图像的覆盖区域内时,将这两个子基准图像进行拆分处理。
[0019]在第一方面的一种可能的实现方式中,子基准图像的边缘由多条顺序收尾相连的线段组成,每一条线段的长度均大于设定线段长度。
[0020]在第一方面的一种可能的实现方式中,每一条线段均为水平线段或者竖直线段。
[0021]在第一方面的一种可能的实现方式中,根据信道质量对音频流进行压缩,信道质量较好时使用数字采集编码方式压缩,信道质量较差时使用转文字编码方式压缩。
[0022]第二方面,本申请提供了一种音视频调度装置,包括:
[0023]通讯单元,用于响应于获取到的连接指令,与连接指令指向的接听终端建立数据通讯关系;
[0024]队列处理单元,用于将采集到的视频流和音频流并在时间长度上对视频流和音频流进行分割,得到视频流段和音频流段并添加队列标记,每一对对应的视频流段和音频流段的长度相同并且具有相同的起止截点;
[0025]音频处理单元,用于将音频流转为文字后压缩;
[0026]第一处理单元,用于对视频流段中的图像进行灰度处理,得到基准图像并对基准图像进行区域划分,得到多个子基准图像,区域划分过程中使用色差绘制划分线;
[0027]第二处理单元,用于对子基准图像进行网格划分,得到多个子基准图像单元,子基准图像单元的面积小于等于设定单位面积;
[0028]第三处理单元,用于统计每一个子基准图像单元中的灰度值数量;
[0029]第四处理单元,用于根据灰度值离散度对子基准图像进行压缩,灰度值数量小于设定数量时,对子基准图像单元采用无损压缩算法,灰度值数量大于等于设定数量时,对子基准图像单元采用有损压缩算法;以及
[0030]发送单元,用于将经过压缩处理的视频流段和音频流段发送至连接指令指向的接听终端。
[0031]第三方面,本申请提供了一种音视频调度系统,所述系统包括:
[0032]一个或多个存储器,用于存储指令;以及
[0033]一个或多个处理器,用于从所述存储器中调用并运行所述指令,执行如第一方面及第一方面任意可能的实现方式中所述的方法。
[0034]第四方面,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质包括:
[0035]程序,当所述程序被处理器运行时,如第一方面及第一方面任意可能的实现方式中所述的方法被执行。
[0036]第五方面,本申请提供了一种计算机程序产品,包括程序指令,当所述程序指令被计算设备运行时,如第一方面及第一方面任意可能的实现方式中所述的方法被执行。
[0037]第六方面,本申请提供了一种芯片系统,该芯片系统包括处理器,用于实现上述各方面中所涉及的功能,例如,生成,接收,发送,或处理上述方法中所涉及的数据和/或信息。
[0038]该芯片系统,可以由芯片构成,也可以包括芯片和其他分立器件。
[0039]在一种可能的设计中,该芯片系统还包括存储器,该存储器,用于保存必要的程序指令和数据。该处理器和该存储器可以解耦,分别设置在不同的设备上,通过有线或者无线的方式连接,或者处理器和该存储器也可以耦合在同一个设备上。
附图说明
[0040]图1是本申请提供的一种音视频调度方法的步骤流程示意框图。
[0041]图2是本申请提供的一种对视频流段和音频流段的划分示意图。
[0042]图3是本申请提供的一种对基准图像进行区域划分的示意图。
[0043]图4是本申请提供的一种对子基准图像的边缘进行整理的示意图。
[0044]图5是本申请提供的另一种对子基准图像的边缘进行整理的示意图。
[0045]图6是本申请提供的一种对子基准图像进行划分的示意图。。
具体实施方式
[0046]以下结合附图,对本申请中的技术方案作进一步详细说明。
[0047]请参阅图1,为本申请公开的一种音视频调度方法,方法包括以下步骤:
[0048]S101,响应于获取到的本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种音视频调度方法,其特征在于,包括:响应于获取到的连接指令,与连接指令指向的接听终端建立数据通讯关系;将采集到的视频流和音频流并在时间长度上对视频流和音频流进行分割,得到视频流段和音频流段并添加队列标记,每一对对应的视频流段和音频流段的长度相同并且具有相同的起止截点;对音频流段进行压缩处理;对视频流段中的图像进行灰度处理,得到基准图像并对基准图像进行区域划分,得到多个子基准图像,区域划分过程中使用色差绘制划分线;对子基准图像进行网格划分,得到多个子基准图像单元,子基准图像单元的面积小于等于设定单位面积;统计每一个子基准图像单元中的灰度值数量;根据灰度值离散度对子基准图像进行压缩,灰度值数量小于设定数量时,对子基准图像单元采用无损压缩算法,灰度值数量大于等于设定数量时,对子基准图像单元采用有损压缩算法;以及将经过压缩处理的视频流段和音频流段发送至连接指令指向的接听终端。2.根据权利要求1所述的音视频调度方法,其特征在于,子基准图像的面积小于设定忽略面积时,将归属于该子基准图像的划分线进行舍弃处理。3.根据权利要求1所述的音视频调度方法,其特征在于,子基准图像的边缘长度小于设定忽略边缘长度时,将归属于该子基准图像的划分线进行舍弃处理。4.根据权利要求1至3中任意一项所述的音视频调度方法,其特征在于,当一个子基准图像位于另一个子基准图像的覆盖区域内时,将这两个子基准图像进行拆分处理。5.根据权利要求4所述的音视频调度方法,其特征在于,子基准图像的边缘由多条顺序收尾相连的线段组成,每一条线段的长度均大于设定线段长度。6.根据权利要求5所述的音视频调度方法,其特征在于,每一条线段均为水平线段或者竖直线段。7.根...

【专利技术属性】
技术研发人员:张美炎陆继松
申请(专利权)人:深圳市宏辉智通科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1