流式任务调度方法、系统、设备及存储介质技术方案

技术编号:45622590 阅读:21 留言:0更新日期:2025-06-24 18:49
本发明专利技术提供了流式任务调度方法、系统、设备及存储介质,其中方法包括:依照调度顺序依次调度各子任务节点执行,并实时记录每个子任务节点的子任务执行日志,并采集各子任务节点的节点运行数据,当基于节点运行数据检测到至少一个子任务节点异常时,通过解析异常子任务节点的子任务执行日志定位中断位置,依据预设重试策略从异常子任务节点的中断位置恢复执行,并跳过已成功执行的子任务节点,从而避免全局重启,节省系统资源,并提高任务的连续性,最终提升任务处理效率。

【技术实现步骤摘要】

所属的技术人员能够理解,本专利技术的各个方面可以实现为系统、方法或程序产品。因此,本专利技术的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“平台”。图5是本专利技术的流式任务调度设备的结构示意图。下面参照图5来描述根据本专利技术的这种实施方式的电子设备500。图5显示的电子设备500仅仅是一个示例,不应对本专利技术实施例的功能和使用范围带来任何限制。如图5所示,电子设备500以通用计算设备的形式表现。电子设备500的组件可以包括但不限于:至少一个处理单元510、至少一个存储单元520、连接不同平台组件(包括存储单元520和处理单元510)的总线530、显示单元540等。其中,存储单元存储有程序代码,程序代码可以被处理单元510执行,使得处理单元510执行本说明书上述流式任务调度方法部分中描述的根据本专利技术各种示例性实施方式的步骤。例如,处理单元510可以执行如图2中所示的步骤。存储单元520可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(ram)5本文档来自技高网...

【技术保护点】

1.一种流式任务调度方法,其特征在于,包括:

2.根据权利要求1所述的流式任务调度方法,其特征在于,所述目标任务注册信息包括所述目标任务的任务称、任务类型、业务逻辑、所述各子任务节点之间的依赖关系、输入参数、执行环境、预设重试策略及预警规则中的至少一种,其中所述各子任务节点之间的依赖关系用来建立各子任务节点的调度顺序。

3.根据权利要求1所述的流式任务调度方法,其特征在于,在响应于任务执行请求,获取目标任务注册信息之前,所述流式任务调度方法还包括:

4.根据权利要求1所述的流式任务调度方法,其特征在于,所述依据预设重试策略从所述异常子任务节点的所述中断...

【技术特征摘要】

1.一种流式任务调度方法,其特征在于,包括:

2.根据权利要求1所述的流式任务调度方法,其特征在于,所述目标任务注册信息包括所述目标任务的任务称、任务类型、业务逻辑、所述各子任务节点之间的依赖关系、输入参数、执行环境、预设重试策略及预警规则中的至少一种,其中所述各子任务节点之间的依赖关系用来建立各子任务节点的调度顺序。

3.根据权利要求1所述的流式任务调度方法,其特征在于,在响应于任务执行请求,获取目标任务注册信息之前,所述流式任务调度方法还包括:

4.根据权利要求1所述的流式任务调度方法,其特征在于,所述依据预设重试策略从所述异常子任务节点的所述中断位置恢复执行,包括:

5.根据权利要求1所述的方法,其特征在于,所述通过解析异常子任务节点的所述子任务执行日志定位任务中断位置,包括:...

【专利技术属性】
技术研发人员:纪昊
申请(专利权)人:上海携程数科信息技术有限公司
类型:发明
国别省市:

相关技术
    暂无相关专利
网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1