多路径视频传输调度方法、设备及程序产品技术

本发明专利技术提供一种多路径视频传输调度方法、设备及程序产品，所述方法包括：获取每条传输子流在当前时刻下对应的传输层状态信息和应用层质量信息；获取多层神经网络模型，输入传输层状态信息，得到n条传输子流的流量平均值和流量标准差，将流量平均值和流量标准差映射到[0,1]范围内，得到动作矩阵；按照动作矩阵指示的增强层数据的发送比例调度控制n条传输子流；根据传输层状态信息和应用层质量信息计算传输子流调度奖励值；通过强化学习智能体，以最大化未来传输子流调度奖励值之和为优化目标对多层神经网络模型进行训练和参数更新直至收敛；能够解决无法及时响应网络环境的变化，导致无法在多流实时视频传输系统中满足用户体验质量需求的问题。

【技术实现步骤摘要】

本专利技术涉及计算机，尤其涉及一种多路径视频传输调度方法、设备及程序产品。

技术介绍

1、随着网络技术的发展以及人们对互联网需求的增加，传统的单路径传输的缺点逐渐显露，带宽利用率低、拥塞风险高、可靠性低、适应性差等缺点对网络传输造成许多不利影响。为克服单路径传输的缺陷，多路径视频传输技术开始兴起。多路径视频传输算法同时采用多条链路，在调度器的调度下进行传输。多路径视频传输能够适应网络拓扑结构的变化，保证数据传输的高效性和稳定性，但由于网络环境的高度动态性、传输链路的高度异构性等因素，多路径调度算法的设计面临极大挑战。

2、传统的多路径调度算法，例如基于阻塞估计的调度器(blocking estimation-based scheduler，blest)、基于强化学习的调度器(reinforcement learning basedscheduler，reles)和滑动多路径调度器(slide together multipath scheduler，stms)等，要么只考虑了传输层的性能指标，缺乏对用户体验质量(quality of exper本文档来自技高网...

【技术保护点】

1.一种多路径视频传输调度方法，其特征在于，所述方法用于在目标网络中的多路径视频传输调度装置上运行，所述目标网络中还包括视频转发服务器、上游节点和下游节点，所述上游节点与所述下游节点之间建立有n条传输子流，所述n为大于1的整数；所述多路径视频传输调度装置运行有强化学习智能体，所述强化学习智能体用于调度控制所述n条传输子流；该方法包括以下步骤：

2.根据权利要求1所述的多路径视频传输调度方法，其特征在于，所述按照所述动作矩阵指示的增强层数据的发送比例调度控制所述n条传输子流，包括：

3.根据权利要求1所述的多路径视频传输调度方法，其特征在于，所述以最大化未来传输子流...

【技术特征摘要】

1.一种多路径视频传输调度方法，其特征在于，所述方法用于在目标网络中的多路径视频传输调度装置上运行，所述目标网络中还包括视频转发服务器、上游节点和下游节点，所述上游节点与所述下游节点之间建立有n条传输子流，所述n为大于1的整数；所述多路径视频传输调度装置运行有强化学习智能体，所述强化学习智能体用于调度控制所述n条传输子流；该方法包括以下步骤：

2.根据权利要求1所述的多路径视频传输调度方法，其特征在于，所述按照所述动作矩阵指示的增强层数据的发送比例调度控制所述n条传输子流，包括：

3.根据权利要求1所述的多路径视频传输调度方法，其特征在于，所述以最大化未来传输子流调度奖励值之和为优化目标对所述多层神经网络模型进行训练和参数更新直至收敛，包括：

4.根据权利要求1所述的多路径视频传输调度方法，其特征在于，所述传输层状态信息包括吞吐率、延迟或者丢包率；所述应用层质量信息包括应用层帧率或者峰值信噪比；所述根据所述传输层状态信息和所述应用层质量信息计算传输子流调度奖励值，计算式为：

5.根据权利要求4所述的多路径视频传输调度方法，其特征在...

【专利技术属性】
技术研发人员：张欢欢，周安福，孙玮琳，马华东，
申请(专利权)人：北京邮电大学，
类型：发明
国别省市：