任务调度方法、装置、计算机设备和存储介质制造方法及图纸

本公开涉及大数据技术领域，具体公开了一种任务调度方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括：扫描至少一个目标集群对应的配置记录表；根据配置记录表计算各目标集群在目标监控时间段内的待执行任务数量；当任意一个目标集群在目标监控时间段的待执行任务数量符合预警条件时，获取目标监控时间段内目标集群的初始任务调度方案；模拟初始任务调度方案，若初始任务调度方案的模拟结果表示不能够解除预警，则获取管理终端反馈的优化调度方案；基于优化调度方案对各待执行任务进行调度。采用本方法能够有效避免系统运行紊乱，提高了系统运行的稳定性。提高了系统运行的稳定性。提高了系统运行的稳定性。

【技术实现步骤摘要】
任务调度方法、装置、计算机设备和存储介质


[0001]本申请涉及大数据
，特别是涉及一种任务调度方法、装置、计算机设备、存储介质和计算机程序产品。

技术介绍

[0002]随着电商业务的不断丰富，为了能提高系统的性能，通常使用可以提供云计算、大数据处理等服务的任务集群处理电商各个系统需要在指定时间执行的待处理任务，例如活动的开始与结束、订单的自动处理、日常供数、统计等，从而保证电商系统业务的稳定运行。
[0003]现有技术中，在对待执行任务进行调度时，通常是在待执行任务创建时对待执行任务进行集群分配，由对应的集群对待执行任务进行处理。任务调度一经创建就无法修改，调度工具也无法知晓任务执行情况，容易出现服务器阻塞，进而导致整个系统其他应用的核心重要任务无法执行，使得整个系统的运行紊乱，系统运行稳定性低。

技术实现思路

[0004]基于此，有必要针对上述技术问题，提供一种能够提高电商系统运行稳定性的任务调度方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
[0005]第一方面，本申请提供了一种任务调度方法。所述方法包括：
[0006]扫描至少一个目标集群对应的配置记录表；
[0007]根据所述配置记录表计算各所述目标集群在目标监控时间段内的待执行任务数量；
[0008]当任意一个所述目标集群在目标监控时间段的待执行任务数量符合预警条件时，获取所述目标监控时间段内所述目标集群的初始任务调度方案；
[0009]模拟所述初始任务调度方案，若所述初始任务调度方案的模拟结果表示不能够解除预警，则获取管理终端反馈的优化调度方案；
[0010]基于所述优化调度方案对所述目标集群在所述目标监控时间段内的各待执行任务进行调度。
[0011]在其中一个实施例中，所述获取所述目标监控时间段内所述目标集群的初始任务调度方案，包括：
[0012]获取所述目标集群在历史目标监控时间段的历史任务调度数据；
[0013]根据所述历史任务调度数据获取所述历史任务的优先级；
[0014]基于所述历史任务的优先级与所述目标集群中的各待执行任务，生成所述目标监控时间段内所述目标集群的初始任务调度方案。
[0015]在其中一个实施例中，所述获取所述目标监控时间段内所述目标集群的初始任务调度方案，包括：
[0016]获取所述目标集群中各所述待执行任务预先配置的优先级；
[0017]根据所述预先配置的优先级生成所述目标监控时间段内所述目标集群的初始任
务调度方案。
[0018]在其中一个实施例中，所述模拟所述初始任务调度方案，包括：
[0019]模拟所述初始任务调度方案；
[0020]获取所述目标集群在所述目标监控时间段内的最大可执行任务量；
[0021]根据模拟调度完成后所述目标集群在所述目标监控时间段内的剩余待执行任务数量以及所述最大可执行任务量，确定所述初始任务调度方案的模拟结果。
[0022]在其中一个实施例中，所述获取所述目标集群在所述目标监控时间段内的最大可执行任务量，包括：
[0023]获取所述目标集群的配置参数；
[0024]计算模拟调度完成后所述目标集群的平均任务执行时长；
[0025]根据所述配置参数、平均任务执行时长以及所述目标监控时间段的间隔时长，确定所述目标集群在所述目标监控时间段内的最大可执行任务量。
[0026]在其中一个实施例中，所述方法还包括：
[0027]若所述初始任务调度方案的模拟结果表示能够解除预警，则按照所述初始任务调度方案进行任务调度，并将所述预警信息、初始任务调度方案以及所述模拟结果发送给所述目标集群的管理人员。
[0028]在其中一个实施例中，所述方法还包括：接收所述业务系统生成的新增待执行任务指令；
[0029]当存在集群类别为新增任务集群，且新增任务集群运行状态为安全的目标配置集群时，将所述新增待执行任务分配至所述目标配置集群。
[0030]在其中一个实施例中，所述根据所述预先配置的优先级生成所述目标监控时间段内所述目标集群的初始任务调度方案，包括：
[0031]根据所述预先配置的优先级，对各所述待执行任务进行降序排列；
[0032]将排列在后预设个数的待执行任务确定为延期任务；
[0033]根据各所述延期任务以及预设延期时长生成所述目标监控时间段内所述目标集群的初始任务调度方案。
[0034]第二方面，本申请还提供了一种任务调度装置。所述装置包括：
[0035]扫描模块，用于扫描至少一个目标集群对应的配置记录表；
[0036]任务数量计算模块，用于根据所述配置记录表计算各所述目标集群在目标监控时间段内的待执行任务数量；
[0037]任务调度方案确定模块，用于当任意一个所述目标集群在目标监控时间段的待执行任务数量符合预警条件时，获取所述目标监控时间段内所述目标集群的初始任务调度方案；
[0038]模拟调度模块，用于模拟所述初始任务调度方案，若所述初始任务调度方案的模拟结果表示不能够解除预警，则获取管理终端反馈的优化调度方案；
[0039]任务调度模块，用于基于所述优化调度方案对所述目标集群在所述目标监控时间段内的各待执行任务进行调度。
[0040]第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述的方法的
步骤。
[0041]第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的方法的步骤。
[0042]第五方面，本申请还提供了一种计算机程序产品。所述计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述的方法的步骤。
[0043]上述任务调度方法、装置、计算机设备、存储介质和计算机程序产品，在各集群运行时，扫描至少一个目标集群对应的配置记录表，根据配置记录表计算各目标集群在目标监控时间段内的待执行任务数量，通过对正在运行的目标集群进行监控，定时调度平台可以及时了解目标集群内各任务的执行情况，当任意一个目标集群在目标监控时间段内的待执行任务数量符合预警条件时，获取目标监控时间段内目标集群的初始任务调度方案，对初始调度方案进行模拟，若初始任务调度方案的模拟结果表示不能够解除预警，则说明此时需要人工对定时调度平台给出的初始任务调度方案进行优化。接收管理人员的管理终端反馈的优化调度方案，基于优化后的调度方案对目标集群在目标监控时间段内的各待执行任务进行调度。由于优化调度方案是在定时系统给出的初始调度方案上由管理人员进行优化得到的，因此优化调度方案与当前目标集群的运行情况具有良好的适配性，根据优化后的调度方案对目标集群中的任务进行调度，能够有效避免由于服务器堵塞导致的系统运行紊乱，核心任务无法执行的情况发生，提高了系本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种任务调度方法，其特征在于，所述方法包括：扫描至少一个目标集群对应的配置记录表；根据所述配置记录表计算各所述目标集群在目标监控时间段内的待执行任务数量；当任意一个所述目标集群在目标监控时间段的待执行任务数量符合预警条件时，获取所述目标监控时间段内所述目标集群的初始任务调度方案；模拟所述初始任务调度方案，若所述初始任务调度方案的模拟结果表示不能够解除预警，则获取管理终端反馈的优化调度方案；基于所述优化调度方案对所述目标集群在所述目标监控时间段内的各待执行任务进行调度。2.根据权利要求1所述的方法，其特征在于，所述获取所述目标监控时间段内所述目标集群的初始任务调度方案，包括：获取所述目标集群在历史目标监控时间段的历史任务调度数据；根据所述历史任务调度数据获取所述历史任务的优先级；基于所述历史任务的优先级与所述目标集群中的各待执行任务，生成所述目标监控时间段内所述目标集群的初始任务调度方案。3.根据权利要求1所述的方法，其特征在于，所述获取所述目标监控时间段内所述目标集群的初始任务调度方案，包括：获取所述目标集群中各所述待执行任务预先配置的优先级；根据所述预先配置的优先级生成所述目标监控时间段内所述目标集群的初始任务调度方案。4.根据权利要求1所述的方法，其特征在于，所述模拟所述初始任务调度方案，包括：模拟所述初始任务调度方案；获取所述目标集群在所述目标监控时间段内的最大可执行任务量；根据模拟调度完成后所述目标集群在所述目标监控时间段内的剩余待执行任务数量以及所述最大可执行任务量，确定所述初始任务调度方案的模拟结果。5.根据权利要求4所述的方法，其特征在于，所述获取所述目标集群在所述目标监控时间段内的最大可执行任务量，包括：获取所述目标集群的配置参数；计算模拟调度完成后所述目标集群的平均任务执行时长；根据所述配置参数、平均任务执行时长以及所述目标监控时间段的间隔时长，确定所述目标集群在所述目标监控时间段内的最大可执行任务量。6.根据权利要求1至5任意一项所述的方法，其特征在于，所述方法还包括：若所述初始任务调度方案的模拟结果表示能够解除预警，则按照所述初始任务调度方案进行任务调度，并将所述预警信息、初始任务调度方案以及所述模拟结果发送给所述目标集群的管理人员。7.根据权利要求1所述的方法，其特征在于，所述方法还包括：接收所述业务系统生成的新增待执行任务指令；当存在集群类别为新增任务集群，且新增任务集群运行状态为安全的目标配置集群时，将所述新增待执行任务分配至所述目标配置集群。
8.根据权利要求3所述的方法，其特征在于，所述根据所述预先配置的优先级生成所述目标监控时间段内所述目标集群的初始任务调度方案，包括：根据所述预先配置的优先级，对各所述待执行任务进行降序排列；将排列在后预设个数的待执行任务确定为延期任务；根据各所述延期任务以及预设延期时长生成所述目标监控时间段内所述目标集群的初始任务调度方案。9.一种任务调度装置，其特征在于，所述装置包括：扫描模块，用于扫描至少一个目标集群对应的配置记录表；任务数量计算模块，用于根据所述配置记录表计算各所述目标集群在目标监控时间段内的待执...

【专利技术属性】
技术研发人员：郭天衡，李红霞，李响，
申请(专利权)人：建信金融科技有限责任公司，
类型：发明
国别省市：