集群作业控制方法、装置、电子设备及存储介质制造方法及图纸

技术编号:32544846 阅读:14 留言:0更新日期:2022-03-05 11:42
本公开关于一种集群作业控制方法、装置、电子设备及存储介质,方法包括:获取预设的控制指令接收接口在被调用时传入集群的作业控制指令,并发送作业控制指令至作业调度程序;通过作业调度程序确定作业控制指令所针对的目标作业,并将作业控制指令传递至正在负责执行目标作业的作业执行程序;通过作业执行程序根据作业控制指令,生成针对各任务执行程序的策略调整逻辑,并下发策略调整逻辑至对应的任务执行程序;任务执行程序为负责执行目标作业中各任务的应用程序;控制任务执行程序执行策略调整逻辑对应的执行策略调整操作,以控制集群按照与作业控制指令对应的执行方式执行目标作业。采用本公开可以提高集群执行作业的效率。率。率。

【技术实现步骤摘要】
集群作业控制方法、装置、电子设备及存储介质


[0001]本公开涉及计算机
,尤其涉及一种集群作业控制方法、装置、电子设备及存储介质。

技术介绍

[0002]服务器集群就是指将很多服务器集中起来一起进行同一种服务,在客户端看来就像是只有一个服务器。集群可以利用多个计算机进行并行计算从而获得很高的计算速度,也可以用多个计算机做备份,从而使得任何一个机器坏了整个系统还是能正常运行。
[0003]相关技术的服务器集群在执行实时计算作业时,任何的变更、升级等调整都需要重启作业,而更改作业、重启作业需要的时间很长,这使得无法对服务器集群正在执行的实时计算作业进行灵活控制,不利于提高服务器集群执行作业的效率。

技术实现思路

[0004]本公开提供一种集群作业控制方法、装置、电子设备及存储介质,以至少解决相关技术中集群执行作业的效率不高的问题。本公开的技术方案如下:
[0005]根据本公开实施例的第一方面,提供一种集群作业控制方法,包括:
[0006]获取预设的控制指令接收接口在被调用时传入集群的作业控制指令,并发本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种集群作业控制方法,其特征在于,包括:获取预设的控制指令接收接口在被调用时传入集群的作业控制指令,并发送所述作业控制指令至作业调度程序;通过所述作业调度程序确定所述作业控制指令所针对的目标作业,并将所述作业控制指令传递至正在负责执行所述目标作业的作业执行程序;通过所述作业执行程序根据所述作业控制指令,生成针对各任务执行程序的策略调整逻辑,并下发所述策略调整逻辑至对应的所述任务执行程序;所述任务执行程序为负责执行所述目标作业中各任务的应用程序;控制所述任务执行程序执行所述策略调整逻辑对应的执行策略调整操作,以控制所述集群按照与所述作业控制指令对应的执行方式执行所述目标作业。2.根据权利要求1所述的集群作业控制方法,其特征在于,所述获取预设的控制指令接收接口在被调用时传入集群的作业控制指令,包括:在检测到所述控制指令接收接口被客户端调用时,接收所述客户端传入所述集群的主节点的接口调用参数;所述接口调用参数包括用于表征所述作业控制指令的目标资源对应的资源表述标识和所述目标资源对应的资源操作标识;对所述接口调用参数进行解析处理,获得所述作业控制指令。3.根据权利要求1所述的集群作业控制方法,其特征在于,所述通过所述作业执行程序根据所述作业控制指令,生成针对各任务执行程序的策略调整逻辑,并下发所述策略调整逻辑至对应的所述任务执行程序,包括:通过所述作业执行程序确定所述目标作业中的任务,并确定负责执行所述任务的任务执行程序;通过所述作业执行程序根据所述作业控制指令,针对所述任务执行程序生成对应的策略调整逻辑,并在所述集群的从节点中,确定运行所述任务执行程序的目标从节点;发送所述策略调整逻辑至所述目标从节点。4.根据权利要求3所述的集群作业控制方法,其特征在于,若所述作业控制指令为系统运维操作指令,所述通过所述作业执行程序根据所述作业控制指令,生成针对各任务执行程序的策略调整逻辑,包括:通过所述作业执行程序根据所述系统运维操作指令,生成针对各任务执行程序的策略调整逻辑;所述策略调整逻辑用于对所述任务执行程序执行与所述系统运维操作指令对应的系统运维操作。5.根据权利要求4所述的集群作业控制方法,其特征在于,所述系统运维操作指令包括针对所述目标作业中数据处理任务的数据输入速度控制指令,所述通过所述作业执行程序根据所述系统运维操作指令,生成针对各任务执行程序的策略调整逻辑,包括:通过所述作业执行程序根据所...

【专利技术属性】
技术研发人员:刘建刚
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1