一种任务调度方法、装置及存储介质制造方法及图纸

技术编号:37818417 阅读:15 留言:0更新日期:2023-06-09 09:50
本申请公开了一种任务调度方法、装置及存储介质,涉及任务调度技术领域。该方法可应用于分布式系统,分布式系统中包括主节点和至少两个从节点,主节点和至少两个从节点可以是具有处理能力的电子设备,以应用于分布式系统中的主节点为例,该方法具体包括:主节点确定当前时间为第一配置信息中的第一任务的执行时间,第一配置信息包括多个任务的信息,一个任务关联多个执行时间。主节点确定该第一任务所属的调度分组,其中,不同调度分组包括不同的从节点,不同的调度分组所关联的任务不同。主节点将第一任务分配至第一任务所属的调度分组所包括的第一从节点。通过该方法可以提高任务执行的效率。务执行的效率。务执行的效率。

【技术实现步骤摘要】
一种任务调度方法、装置及存储介质


[0001]本专利技术涉及任务调度
,尤其涉及一种任务调度方法、装置及存储介质。

技术介绍

[0002]为了提高任务的执行效率,通常会并行执行多个任务。当需要并行执行多个任务时,通常基于一定的规则对多个任务进行调度,使得多个任务按照一定顺序执行。
[0003]目前调度多个任务执行的方式有多种,例如可以使用Linux操作系统内置的crontab调度工具分别设置多个任务的执行时间,使多个任务按照设定的时间执行。又例如,也可以使用开源调度框架spring task或quartz等调度工具按照一定顺序来执行任务。但如果在一定时间段内需要执行的任务数量较多时,按照一定的执行时间或者执行顺序来调度多个任务会导致单一设备负载较高,影响任务的执行效率。

技术实现思路

[0004]本申请提供了一种任务调度方法、装置及存储介质,用于解决任务调度时单一设备负载较高,影响任务执行效率的问题。
[0005]第一方面,本申请提供了一种任务调度方法。该方法可应用于分布式系统,分布式系统中包括主节点和至少两个从节点,主节点和至少两个从节点可以是具有处理能力的电子设备,以应用于分布式系统中的主节点为例,该方法具体包括:主节点确定当前时间为第一配置信息中的第一任务的执行时间,确定该第一任务所属的调度分组,并将第一任务分配至第一任务所属的调度分组所包括的第一从节点。第一配置信息包括多个任务的信息,一个任务关联多个执行时间。不同的调度分组包括不同的从节点,不同的调度分组所关联的任务不同
[0006]在本申请实施例中,分布式系统中包括主节点和至少两个从节点。系统可执行的任务包括第一配置信息中的多个任务,当主节点判断当前执行多个任务中的第一任务时,可以对第一任务进行调度。至少两个从节点可以事先进行调度分组,不同分组执行不同任务。主节点根据至少两个从节点的分组对第一任务进行分组调度。因此,对分布式系统中的从节点进行分组后,若当前有较多任务需要执行,可以将较多任务调度到不同分组中执行,使得各个从节点能够有序执行任务,各个从节点的负载更加均衡,提升了执行任务的效率。
[0007]可选的,在主节点确定该第一任务所属的调度分组之前,该方法还包括:主节点根据第二配置信息确定多个调度分组,第二配置信息包括至少两个从节点的信息。主节点根据多个调度分组及第一配置信息确定多个任务分别所属的调度分组。
[0008]在本申请实施例中,在确定第一任务所属的调度分组之前,可以事先根据需求划分至少两个从节点的分组,并将分组后的信息存储于第二配置信息。主节点可以根据至少两个从节点的分组及第一配置信息中的多个任务的配置情况合理地将多个任务进行分配,即不同分组执行不同的任务,使得分布式系统的负载更加均衡。
[0009]可选的,主节点将第一任务分配至第一任务所属的调度分组所包括的第一从节
点,包括:主节点获取第一任务所属的调度分组中各个从节点的状态信息,各个从节点的状态信息包括资源占用情况。主节点根据各个从节点的状态信息确定各个从节点在调度时所占的权重。主节点根据各个从节点所占的权重确定将第一任务分配至第一从节点。
[0010]在本申请实施例中,主节点在将第一任务分配到调度分组中的某一个从节点时,根据各个从节点的状态信息对第一任务进行分配,可以使得该分组中各个从节点的负载更加均衡,保证了执行任务的效率。
[0011]可选的,主节点获取第一任务所属的调度分组中各个从节点的状态信息,包括:主节点通过分布式应用程序协调服务zookeeper获取各个从节点的心跳信号,心跳信号中包括资源占用情况。
[0012]可选的,当各个从节点的状态信息指示第一任务所属的调度分组中各个从节点不可用时,该方法还包括:主节点发送第一指示信息,第一指示信息用于指示第一任务所属的调度分组通过zookeeper创建临时从节点。
[0013]可选的,该方法还包括:主节点根据第三配置信息确定当前时间执行的事件,第三配置信息包括多个事件。主节点发送第二指示信息,第二指示信息用于指示至少两个从节点处理该事件。
[0014]第二方面,本申请提供了一种任务调度方法。以应用于分布式系统中的至少两个从节点为例,该方法具体包括:第一从节点通过zookeeper创建节点,向主节点发送心跳信号,心跳信号中包括第一从节点的资源占用情况。第一从节点接收并执行主节点分配的第一任务。
[0015]可选的,该方法还包括:第一从节点接收第二指示信息,该第二指示信息用于指示第一从节点处理事件。第一从节点根据该第二指示信息对该事件进行处理。
[0016]第三方面,本申请提供了一种任务调度装置。该装置包括确定模块及调度模块。其中,确定模块用于确定当前时间为第一配置信息中的第一任务的执行时间,第一配置信息包括多个任务的信息,一个任务关联多个执行时间。该确定模块还用于确定该第一任务所属的调度分组,其中,不同的调度分组包括不同的从节点,不同的调度分组关联的任务不同。调度模块用于将第一任务分配至第一任务所属的调度分组所包括的第一从节点。
[0017]可选的,确定模块还用于:根据第二配置信息确定多个调度分组,第二配置信息包括至少两个从节点的信息;根据多个调度分组及第一配置信息确定多个任务分别所属的调度分组。
[0018]可选的,调度模块具体用于:获取第一任务所属的调度分组中各个从节点的状态信息,其中,一个从节点的状态信息包括该从节点的资源占用情况;根据各个从节点的状态信息确定各个从节点在调度时所占的权重;根据各个从节点所占的权重确定将第一任务分配至第一从节点。
[0019]可选的,调度模块具体用于:通过分布式应用程序协调服务zookeeper获取各个从节点的心跳信号,心跳信号中包括资源占用情况。
[0020]可选的,调度模块还用于:发送第一指示信息,第一指示信息用于指示第一任务所属的调度分组通过zookeeper创建临时从节点。
[0021]可选的,调度模块还用于:根据第三配置信息确定当前时间执行的事件,发送第二指示信息。其中,第三配置信息包括多个事件,第二指示信息用于指示至少两个从节点处理
该事件。
[0022]第四方面,本申请提供了一种任务调度装置。该装置包括:注册模块、发送模块和接收模块。其中,注册模块用于通过zookeeper创建节点。发送模块用于发送心跳信号,心跳信号中包括任务调度装置的资源占用情况。接收模块用于接收并执行主节点分配的第一任务。
[0023]可选的,接收模块还用于:接收第二指示信息,第二指示信息用于指示任务调度装置处理事件。根据该第二指示信息对该事件进行处理。
[0024]第五方面,本申请实施例提供了一种电子设备,该电子设备包括处理器以及与处理器通信连接的存储器。其中,存储器存储有计算机执行指令,该指令被处理器执行,以使处理器能够执行上述第一方面或第二方面中任一项所述的方法。
[0025]第六方面,本申请实施例提供了一种计算机可读存储介质,该计本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种任务调度方法,其特征在于,应用于分布式系统,所述分布式系统中包括主节点和至少两个从节点,所述方法包括:所述主节点确定当前时间为第一配置信息中的第一任务的执行时间,所述第一配置信息包括多个任务的信息,一个任务关联多个执行时间,所述多个任务包括所述第一任务和第二任务;所述主节点确定所述第一任务所属的调度分组,不同的调度分组包括不同的从节点,不同的调度分组所关联的任务不同;所述主节点将所述第一任务分配至所述第一任务所属的调度分组所包括的第一从节点。2.如权利要求1所述的方法,其特征在于,在所述主节点确定所述第一任务所属的调度分组之前,所述方法还包括:所述主节点根据第二配置信息确定多个调度分组,所述第二配置信息包括所述至少两个从节点的信息;所述主节点根据所述多个调度分组及所述第一配置信息确定所述多个任务分别所属的调度分组。3.如权利要求2所述的方法,其特征在于,所述主节点将所述第一任务分配至所述第一任务所属的调度分组所包括的第一从节点,包括:所述主节点获取所述第一任务所属的调度分组中各个从节点的状态信息,其中,一个从节点的状态信息包括所述一个从节点的资源占用情况;所述主节点根据所述各个从节点的状态信息确定所述各个从节点在调度时所占的权重;所述主节点根据所述各个从节点所占的权重确定将所述第一任务分配至所述第一从节点。4.如权利要求3所述的方法,其特征在于,所述主节点获取所述第一任务所属的调度分组中各个从节点的状态信息,包括:所述主节点通过分布式应用程序协调服务zookeeper获取所述各个从节点的心跳信号,所述心跳信号中包括资源占用情况。5.如权利要求3所述的方法,其特征在于,当所述各个从节点的状态信息指示所述第一任务所属的调度分组中各个从节点不可用时,所述方法还包括:所述主节点发送第一指示信息,所述的第一指示信息用于指示所述第一任务所属的调度分组通过zookeeper创建临时从节点。6.如权利要求1所述的方法,其特征在于,所述方法还包括:所述主节点根据第三配置信息确定当前时间执行的事件,所述第三配置信息中包括多个事件;所述主节点发送第二指示信息,所述第二指示信息用于指示所述至少两个从节点处理所述...

【专利技术属性】
技术研发人员:张颖
申请(专利权)人:建信金融科技有限责任公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1