任务调度方法、电子设备及任务调度系统技术方案

技术编号:42602291 阅读:29 留言:0更新日期:2024-09-03 18:13
本申请实施例涉及计算机领域,公开了一种任务调度方法、电子设备及任务调度系统,该任务调度方法包括:获取多个任务,其中,每一任务对应至少一个表,每一表对应至少一个工作流;通过血缘解析工具解析每一任务,得到表和表之间的依赖关系、工作流和表之间的依赖关系;将表和表之间的依赖关系、工作流和表之间的依赖关系存储至图数据库;查询图数据库,获取工作流和工作流之间的血缘关系、任务和任务之间的血缘关系;根据工作流和工作流之间的血缘关系、任务和任务之间的血缘关系,通过任务调度工具进行任务调度。通过上述技术方案,本申请能够准确确定工作流的血缘关系,从而保证任务调度顺序的准确性。

【技术实现步骤摘要】

本申请实施例涉及计算机领域,特别是涉及一种任务调度方法、电子设备及任务调度系统


技术介绍

1、大数据任务调度工具(do l ph i nschedu l er)是一个分布式易扩展的可视化工作流任务调度开源系统,支持多种任务类型、有丰富的工作流操作。do l ph i nschedul er可以建立多个项目,一个项目可以建立多个工作流,一个工作流可以有多个多种类型的任务。

2、在do l ph i nschedu l er中,为了解决任务之间的上下游关系,任务的血缘关系通过带箭头的线来连接表示,工作流的血缘关系通过添加子程序实现。然而随着业务场景和需求越来越复杂,单个工作流里面的任务数量越来越多,通过人工连线配置任务的血缘关系容易出现错漏,导致在实际执行过程中出现表数据缺失的情况,从而使得下游所有任务都会受到影响,无法确定工作流的血缘关系,导致工作流的调度没有顺序。


技术实现思路

1、本申请实施例旨在提供一种任务调度方法、电子设备及任务调度系统,以准确确定工作流的血缘关系,从而保证任务调度顺序的准本文档来自技高网...

【技术保护点】

1.一种任务调度方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述通过血缘解析工具解析每一所述任务,得到表和表之间的依赖关系、工作流和表之间的依赖关系,包括:

3.根据权利要求2所述的方法,其特征在于,所述通过血缘解析工具解析每一所述任务中的SQL语句,生成抽象语法树,包括:

4.根据权利要求1-3任一项所述的方法,其特征在于,所述将所述表和表之间的依赖关系、所述工作流和表之间的依赖关系存储至图数据库,包括:

5.根据权利要求1-3任一项所述的方法,其特征在于,所述任务调度工具包括关系型数据库,所述关系型数据库...

【技术特征摘要】

1.一种任务调度方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述通过血缘解析工具解析每一所述任务,得到表和表之间的依赖关系、工作流和表之间的依赖关系,包括:

3.根据权利要求2所述的方法,其特征在于,所述通过血缘解析工具解析每一所述任务中的sql语句,生成抽象语法树,包括:

4.根据权利要求1-3任一项所述的方法,其特征在于,所述将所述表和表之间的依赖关系、所述工作流和表之间的依赖关系存储至图数据库,包括:

5.根据权利要求1-3任一项所述的方法,其特征在于,所述任务调度工具包括关系型数据库,所述关系型数据库用于存储预定义的工作流和工作流之间的血缘关系、任务和任务之间的血缘关系;

6.根据权利要求5所述的方...

【专利技术属性】
技术研发人员:张世鸣陈丽旋
申请(专利权)人:广州视源电子科技股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1