任务调度方法、装置、计算机设备、存储介质和程序产品制造方法及图纸

技术编号:43859904 阅读:22 留言:0更新日期:2024-12-31 18:48
本申请涉及一种任务调度方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。所述方法用于分布式系统中的中心节点,所述方法包括:获取待处理任务;根据所述待处理任务对应的任务需求和所述分布式系统中各执行节点对应的网络性能参数,从各所述执行节点中确定目标执行节点;将所述待处理任务分配至所述目标执行节点中进行任务处理。采用本方法能够对高通量计算系统中的网络性能进行监测和优化。

【技术实现步骤摘要】

本申请涉及数据处理,特别是涉及一种任务调度方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。


技术介绍

1、在分布式系统中,可以采用高通量计算系统进行数据处理。其中,高通量计算(high-throughput computing,htc)是大规模科学计算中常用的一种计算模式,通过将一个大型计算任务分解成多个子任务,并明确每个子任务的资源需求,然后将需求提交到中心节点,同时,中心节点收集资源池中的可用资源,将可用资源与各个子任务需求进行匹配,从而进行任务分发,并对计算资源进行管理和调度。随着计算任务规模的增大和网络环境的复杂化,高通量计算在处理计算任务时面临网络性能瓶颈的问题。

2、然而,现有高通量计算系统主要关注计算资源的管理和调度,缺乏对网络性能的监测和优化。


技术实现思路

1、本申请实施例提供一种任务调度方法、装置、计算机设备、计算机可读存储介质和计算机程序产品,可以对高通量计算系统中的网络性能进行监测和优化。

2、第一方面,本申请提供了一种任务调度方法,所述方法包括:<本文档来自技高网...

【技术保护点】

1.一种任务调度方法,其特征在于,用于分布式系统中的中心节点,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述待处理任务对应的任务需求和所述分布式系统中各执行节点对应的网络性能参数,从各所述执行节点中确定目标执行节点,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据各所述目标网络性能参数,从各所述候选执行节点中确定所述目标执行节点,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述目标网络性能参数,确定所述候选执行节点对应的任务分配优先级,包括:

5.根据权利要求1所述的方法,其特征在于,所述方法...

【技术特征摘要】

1.一种任务调度方法,其特征在于,用于分布式系统中的中心节点,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述根据所述待处理任务对应的任务需求和所述分布式系统中各执行节点对应的网络性能参数,从各所述执行节点中确定目标执行节点,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据各所述目标网络性能参数,从各所述候选执行节点中确定所述目标执行节点,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述目标网络性能参数,确定所述候选执行节点对应的任务分配优先级,包括:

5.根据权利要求1所述的方法,其特征在于,所述方法还包括:

6.一种任务调度方法,其特征在于,用于分布式系统中的目标执行节点,所述方法包括:

7.根据权利...

【专利技术属性】
技术研发人员:孙一豪马思聪孙吉斌
申请(专利权)人:中国电信股份有限公司技术创新中心
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1