一种基于网络资源的调度方法以及装置制造方法及图纸

技术编号:41267920 阅读:16 留言:0更新日期:2024-05-11 09:23
本申请实施例公开了一种网络资源的调度方法,用于提升数据作业任务的处理效率。本申请实施例方法包括:接收数据传输任务,数据传输任务用于为计算节点提供输入数据或者输出计算节点的输出数据。根据数据传输任务的优先级确定调度信息,调度信息用于指示计算集群中执行数据传输任务的传输节点的网络资源中分配给数据传输任务的分配网络资源。向传输节点发送调度信息,以使得传输节点基于分配的网络资源传输数据传输任务。

【技术实现步骤摘要】

本申请实施例涉及计算机领域,尤其涉及一种基于网络资源的调度方法以及装置


技术介绍

1、随着调度器的发展,在大规模计算设备集群中,由调度器对数据作业任务进行统一管理和调度。目前,调度器在数据作业任务调度过程中,通常基于计算资源对数据作业任务进行调度,计算资源例如中央处理(central processing unit,cpu)、内存和图形处理器(graphics processing unit,gpu)。

2、云服务器中在处理数据作业任务时,数据作业任务处理除了计算任务之外,还包括数据传输任务,即数据作业任务处理效率处理取决于计算任务的处理效率之外,还取决与数据传输任务的处理效率。由于目前的调度器在数据作业任务调度时,通常基于计算资源调度计算任务,数据传输任务所需的网络资源未参与调度器的统一管理和调度,从而导致调度器对数据作业任务的整体调度效果差,数据作业任务的处理效率低。


技术实现思路

1、本申请实施例提供了一种基于网络资源的调度方法以及装置,用于提升数据作业任务的处理效率。

2、本本文档来自技高网...

【技术保护点】

1.一种网络资源的调度方法,其特征在于,应用于调度器,所述调度器调度计算任务至计算集群中的计算节点,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述分配网络资源包括:所述分配网络资源占所述传输节点的网络资源的比例,所述分配网络资源的上限占所述传输节点的网络资源的比例,及所述分配网络资源的下限占所述传输节点的网络资源的比例。

3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述实际使用的网络资源调整所述分配网络资源包括:

5.根据权利要求1至4中任一项所述的方法,...

【技术特征摘要】

1.一种网络资源的调度方法,其特征在于,应用于调度器,所述调度器调度计算任务至计算集群中的计算节点,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述分配网络资源包括:所述分配网络资源占所述传输节点的网络资源的比例,所述分配网络资源的上限占所述传输节点的网络资源的比例,及所述分配网络资源的下限占所述传输节点的网络资源的比例。

3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述实际使用的网络资源调整所述分配网络资源包括:

5.根据权利要求1至4中任一项所述的方法,其特征在于,所述数据传输任务的优先级为高优先级,所述根据所述数据传输任务的优先级确定所述计算集群中执行所述数据传输任务的传输节点的网络资源中分配给所述数据传输任务的分配网络资源包括:

6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:

7.一种网络资源的调度装置,其特征在于,包括:

8.根据权利要求7所述的装置,其特征在于,...

【专利技术属性】
技术研发人员:陈杰朱波丁肇辉
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1