一种作业调度方法、计算设备及系统技术方案

技术编号:42236136 阅读:17 留言:0更新日期:2024-08-02 13:50
本申请实施例提供了一种作业调度方法、计算设备及系统,涉及计算机技术领域。应用于第一服务器,第一服务器管理多个计算群组;每个计算群组包括一个或多个计算集群;方法包括:获取作业请求;基于作业请求,确定用于执行作业的第一应用对应的第一应用特征;基于第一应用特征,从多个计算集群中,确定与第一应用特征匹配的目标计算集群;将作业下发到目标计算集群,以使目标计算集群处理作业,以实现对计算集群的资源的更合理的调度。

【技术实现步骤摘要】

本申请涉及计算机,尤其涉及一种作业调度方法、计算设备及系统


技术介绍

1、随着信息技术的飞速发展,用户对信息处理的高速计算需求越来越多,相应的,高性能计算(hpc,high-performance comput ing)应运而生。

2、目前,集群系统是高性能计算场景下较为常用的构成方式。集群系统一般包括用于管理所有集群的管理平台和若干集群,单个集群中可以包括用于管理集群内各计算节点的管理节点和若干计算节点;其中,管理平台可以接收用户发起的作业请求,进而根据作业请求携带的资源需求(例如包括但不限于需要aa应用、xxcpu、yy内存以及zz带宽等),从其管理的若干集群中为该作业请求分配一个集群(后续称为第一集群),用于处理该作业请求携带的需要处理的第一数据,接着将作业请求转发至第一集群。相应的,第一集群从其管理的若干计算节点中分配若干第一计算节点(该若干第一计算节点可提供资源满足该资源需求),以通过若干第一计算节点联合运行aa应用以处理第一数据。

3、上述过程中,为了更好的为用户提供优质的服务,实现对作业请求携带的第一数据的处理以及能本文档来自技高网...

【技术保护点】

1.一种作业调度方法,其特征在于,应用于第一服务器,所述第一服务器管理多个计算群组;所述计算群组包括一个或多个计算集群;所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述第一服务器部署应用特征库,所述应用特征库包括若干应用标识与应用特征的对应关系;所述作业请求携带所述第一应用的第一应用标识;

3.如权利要求2所述的方法,其特征在于,所述应用特征从如下至少一个维度分类:计算维度、访存维度、存储维度和网络维度。

4.如权利要求2所述的方法,其特征在于,所述基于所述第一应用标识和所述应用特征库,确定所述第一应用特征,包括:>

5.如权利要...

【技术特征摘要】

1.一种作业调度方法,其特征在于,应用于第一服务器,所述第一服务器管理多个计算群组;所述计算群组包括一个或多个计算集群;所述方法包括:

2.如权利要求1所述的方法,其特征在于,所述第一服务器部署应用特征库,所述应用特征库包括若干应用标识与应用特征的对应关系;所述作业请求携带所述第一应用的第一应用标识;

3.如权利要求2所述的方法,其特征在于,所述应用特征从如下至少一个维度分类:计算维度、访存维度、存储维度和网络维度。

4.如权利要求2所述的方法,其特征在于,所述基于所述第一应用标识和所述应用特征库,确定所述第一应用特征,包括:

5.如权利要求2所述的方法,其特征在于,所述基于所述第一应...

【专利技术属性】
技术研发人员:张鹏
申请(专利权)人:超聚变数字技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1