【技术实现步骤摘要】
一种归集任务调度方法、装置、设备及介质
[0001]本专利技术涉及计算机
,特别涉及一种归集任务调度方法、装置、设备及介质。
技术介绍
[0002]随着系统规模的发展,系统中的待处理任务数量日益增多,任务也变得越来越复杂,尤其是在分布式环境下,存在多个业务系统,每个业务系统都有大量待处理任务的需求,因此需要有一个任务平台对分散的待处理任务进行统一管理调度。
[0003]现有技术中,一般通过开源调度平台对待处理任务进行定时调度,例如在XXL
‑
JOB(分布式任务调度平台)上,获取待处理任务并调用任务对应的接口进行任务处理,由于XXL
‑
JOB可以并行处理待处理任务,所以当大量待处理任务同时调用一个外部接口,就会导致外部接口崩溃,外部接口响应不及时和待处理任务的丢失等情况。
[0004]综上可见,如何在分布式任务调度平台调用外部接口处理大量任务时,避免出现外部接口崩溃和任务丢失的情况,实现待处理任务顺利被外部接口响应的问题。
技术实现思路
[0005]有鉴 ...
【技术保护点】
【技术特征摘要】
1.一种归集任务调度方法,其特征在于,应用于缓存组件,包括:获取系统业务流程生成的待处理任务;确定所述待处理任务的任务类别,并从本地预先创建的多个预设任务集中筛选出与所述任务类别对应的预设任务集,然后将所述待处理任务存放至筛选出的所述预设任务集;获取分布式任务调度平台发送的调度指令,然后提取所述调度指令中携带的任务集标识,并从所述多个预设任务集中确定出与所述任务集标识确定的目标任务集;将所述目标任务集中的待处理任务发送至所述分布式任务调度平台,以便所述分布式任务调度平台调度与接收到的所述待处理任务对应的外部接口,以通过所述外部接口执行与接收到的所述待处理任务对应的任务处理流程。2.根据权利要求1所述的归集任务调度方法,其特征在于,所述获取系统业务流程生成的待处理任务,包括:获取系统业务流程通过对预设实体类中的任务参数进行赋值后得到的待处理任务;其中,所述实体类中的任务参数包括任务关键字、接口请求参数、重试次数以及过期时间;相应的,所述确定所述待处理任务的任务类别,包括:基于所述待处理任务中的任务关键字确定出所述待处理任务的任务类别。3.根据权利要求1所述的归集任务调度方法,其特征在于,所述从本地预先创建的多个预设任务集中筛选出与所述任务类别对应的预设任务集,然后将所述待处理任务存放至筛选出的所述预设任务集的过程中,还包括:若本地预先创建的多个预设任务集中不存在与所述任务类别对应的预设任务集,则创建与所述任务类别对应的初始化任务集,并将所述待处理任务存放至所述初始化任务集。4.根据权利要求1所述的归集任务调度方法,其特征在于,所述获取分布式任务调度平台发送的调度指令,包括:获取分布式任务调度平台按照预设指令触发周期触发的携带有任务集标识的调度指令,所述调度指令为所述分布式任务调度平台将任务关键字作为所述任务集标识以生成的调度指令。5.根据权利要求1所述的归集任务调度方法,其特征在于,所述将所述目标任务集中的待处理任务发送至所述分布式任务调度平台,包括:根据所述分布式任务调度平台发送的预设单批次任务数量,从所述目标任务集中筛选出相应数量的待处理任务,并将筛选出的所述待处理任务发送至所述分布式任务调度平台。6.根据权利要求1至5任一项所述的归集任务调度方法,其特征在于,所述获取分布式任务调度平台发送的调度指令之前,还包括:将当前本地缓存的所有待处理任务的统计信息...
【专利技术属性】
技术研发人员:黄文悦,范渊,刘博,
申请(专利权)人:杭州安恒信息技术股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。