作业执行系统和方法、电子设备和存储介质技术方案

技术编号:43896007 阅读:21 留言:0更新日期:2025-01-03 13:09
本申请提供了一种作业执行系统和方法、电子设备和存储介质,其中,该系统包括:作业接入子系统、作业执行子系统、消息队列以及完成队列;作业接入子系统,用于获取目标请求;作业接入子系统,还用于将目标作业的目标作业标识放入消息队列中;作业执行子系统,用于消费消息队列中的目标作业标识;作业执行子系统,还用于对目标作业标识对应的目标作业执行目标操作之后,将目标作业标识放入完成队列中;作业接入子系统,还用于基于完成队列中的目标作业标识,确定目标作业已完成。通过本申请,解决了相关技术中存在的由于作业步执行的时间比较长,导致这些连接被长期持有;连接的长期持有导致系统资源被占用,无法有效提高并发的技术问题。

【技术实现步骤摘要】

本申请涉及分布式,尤其涉及一种作业执行系统和方法、电子设备和存储介质


技术介绍

1、目前,核心批处理分布式系统是指每天用计算机批量的进行处理数据的分布式系统,由于业务比较复杂,业务会分散到很多的业务系统中像企业端的系统就会存在十几个业务系统,一个作业的执行因此会涉及到多个系统,而系统与系统之间的交互很多都是通过rpc或者http进行,网络通信也是需要耗时的,而作业涉及到的数据量也很大,因此执行完一个流程需要耗费很长时间,执行时间长表示长时间占用系统资源。并且存在如下问题:

2、1.由于作业执行的时间比较长,导致这些连接被长期持有;

3、2.连接的长期持有导致系统资源被占用,无法有效提高并发。

4、因此,相关技术中存在上述的问题。


技术实现思路

1、本申请提供了一种作业执行系统和方法、电子设备和存储介质,以至少解决相关技术中存在的一个技术问题。

2、根据本申请实施例的一个方面,提供了一种作业执行系统,包括:作业接入子系统、作业执行子系统、消息队列以及完成队列;<本文档来自技高网...

【技术保护点】

1.一种作业执行系统,其特征在于,包括:作业接入子系统、作业执行子系统、消息队列以及完成队列;

2.一种作业执行方法,其特征在于,应用于作业接入子系统,包括:

3.根据权利要求2所述的方法,其特征在于,在所述将所述目标作业的目标作业标识放入消息队列中之后,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述异步future中的所述目标作业标识与所述完成队列的所有候选作业标识进行比对,得到比对结果,包括:

5.根据权利要求2至4中任一项所述的方法,其特征在于,所述方法还包括:

6.一种作业执行方法,其特征在于,应...

【技术特征摘要】

1.一种作业执行系统,其特征在于,包括:作业接入子系统、作业执行子系统、消息队列以及完成队列;

2.一种作业执行方法,其特征在于,应用于作业接入子系统,包括:

3.根据权利要求2所述的方法,其特征在于,在所述将所述目标作业的目标作业标识放入消息队列中之后,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述异步future中的所述目标作业标识与所述完成队列的所有候选作业标识进行比对,得到比对结果,包括:

5.根据权利要求2至4中任一项所述的方法,其特征在于,...

【专利技术属性】
技术研发人员:李学进
申请(专利权)人:北京金山云网络技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1