处理任务的方法、装置、存储介质和处理器制造方法及图纸

技术编号:23704397 阅读:65 留言:0更新日期:2020-04-08 11:05
本发明专利技术公开了一种处理任务的方法、装置、存储介质和处理器。其中,该方法包括:获取至少一个任务组的任务组信息,其中,任务组信息至少包括如下之一:至少一个任务组的优先级以及至少一个任务组对应的节点数;基于客户端列表中任务组的优先级信息、至少一个任务组对应的节点数生成预设序列;基于预设序列以及至少一个节点发送的任务请求确定至少一个节点对应的目标任务组;控制至少一个节点执行目标任务组中的任务。本发明专利技术解决了现有技术在对任务进行分布式处理过程中,无法对任务进行管理的技术问题。

Methods, devices, storage media and processors for processing tasks

【技术实现步骤摘要】
处理任务的方法、装置、存储介质和处理器
本专利技术涉及任务管理领域,具体而言,涉及一种处理任务的方法、装置、存储介质和处理器。
技术介绍
在相关技术中,对任务的处理主要采用消息订阅机制的方式,例如,采用RabbitMQ等队列应用对任务进行处理。具体的,用户可根据实际需求构建消息队列的环境,然后手动将任务写入消息队列中,然后,通过编写任务执行程序来订阅消息队列。当消息队列中存在待执行的任务时,用户编写的任务执行程序可获取待执行任务,并执行。但在待执行任务的任务数量较大,需分布式执行的情况下,用户需要手动为任务执行程序准备节点。另外,在上述过程中,无法对每组待执行任务的任务信息进行记录,并且,由于消息队列具有先进先出的特性,因此,现有技术无法完成对多个任务组的优先级分配、任务需求的节点数分配、任务的超时处理、任务的开始、暂停等操作。此外,现有技术也无法对执行失败的任务进行记录,并对执行失败的任务进行重新执行。针对上述的现有技术在对任务进行分布式处理过程中,无法对任务进行管理问题,目前尚未提出有效的解决方案。
技术实现思路
本专利技术实施例提供了一种处理任务的方法、装置、存储介质和处理器,以至少解决现有技术在对任务进行分布式处理过程中,无法对任务进行管理的技术问题。根据本专利技术实施例的一个方面,提供了一种处理任务的方法,包括:获取至少一个任务组的任务组信息,其中,任务组信息至少包括如下之一:至少一个任务组的优先级以及至少一个任务组对应的节点数;基于客户端列表中任务组的优先级信息、至少一个任务组对应的节点数生成预设序列;基于预设序列以及至少一个节点发送的任务请求确定至少一个节点对应的目标任务组;控制至少一个节点执行目标任务组中的任务。进一步地,处理任务的方法还包括:创建至少一个任务组;存储至少一个任务组的任务组信息至客户端列表中,其中,客户端列表为数据库中存储任务组信息的列表,任务组信息还包括如下至少之一:至少一个任务组的状态信息、至少一个任务组的重试次数,状态信息包括如下至少之一:开始状态、暂停状态以及失效状态。进一步地,处理任务的方法还包括:获取至少一个节点的请求时间与当前时间的第一时间差值;滤除客户端列表中第一时间差值大于第一预设差值的任务,得到更新后的客户端列表;基于预设序列以及更新后的客户端列表确定目标任务组。进一步地,处理任务的方法还包括:检测预设任务组的当前状态;在预设任务组的当前状态为暂停状态的情况下,控制预设节点停止执行预设任务组中的任务,其中,预设节点为执行预设任务组中的任务的至少一个节点;根据至少一个任务组的优先级为预设节点重新分配任务。进一步地,处理任务的方法还包括:存储至少一个节点执行目标任务时的执行信息至数据库中,其中,目标任务为目标任务组中至少一个节点所对应的任务;检测至少一个节点执行目标任务时反馈的任务状态;在任务状态为成功执行的情况下,删除数据库中目标任务所对应的执行信息。进一步地,处理任务的方法还包括:获取至少一个节点执行目标任务的开始时间,其中,目标任务为目标任务组中至少一个节点所对应的任务;确定开始时间与当前时间的第二时间差值;在第二时间差值大于第二预设差值的情况下,确定目标任务执行失败,并记录目标任务执行失败时的失败信息,其中,失败信息至少包括:目标任务执行失败的失败次数;在失败次数小于预设次数的情况下,将目标任务添加至数据库的客户端列表的尾部。根据本专利技术实施例的另一方面,还提供了一种处理任务的装置,包括:获取模块,用于获取至少一个任务组的任务组信息,其中,任务组信息至少包括如下之一:至少一个任务组的优先级以及至少一个任务组对应的节点数;生成模块,用于基于客户端列表中任务组的优先级信息、至少一个任务组对应的节点数生成预设序列;确定模块,用于基于预设序列以及至少一个节点发送的任务请求确定至少一个节点对应的目标任务组;控制模块,用于控制至少一个节点执行目标任务组中的任务。进一步地,处理任务的装置还包括:第一获取模块,用于获取至少一个节点执行目标任务的开始时间,其中,目标任务为目标任务组中至少一个节点所对应的任务;第一确定模块,用于确定开始时间与当前时间的第二时间差值;第二确定模块,用于在第二时间差值大于第二预设差值的情况下,确定目标任务执行失败,并记录目标任务执行失败时的失败信息,其中,失败信息至少包括:目标任务执行失败的失败次数;处理模块,用于在失败次数小于预设次数的情况下,将目标任务添加至数据库的客户端列表的尾部。根据本专利技术实施例的另一方面,还提供了一种存储介质,该存储介质包括存储的程序,其中,该程序执行处理任务的方法。根据本专利技术实施例的另一方面,还提供了一种处理器,该处理器用于运行程序,其中,该程序运行时执行处理任务的方法。在本专利技术实施例中,在获取至少一个任务组的任务组信息之后,基于客户端列表中所记录的任务组的优先级信息以及至少一个任务组对应的节点数生成预设序列,然后基于预设序列以及至少一个节点发送的任务请求确定至少一个节点对应的目标任务组,最后,控制至少一个节点执行目标任务组中的任务。其中,任务组信息至少包括如下之一:至少一个任务组的优先级以及至少一个任务组对应的节点数。在上述过程中,通过获取任务组的优先级信息以及任务组所对应的节点数来确定执行任务组中的任务的节点,并将该任务组中的任务分配至对应的节点,从而实现了对任务组的优先级分配以及任务需求的节点数的分配,达到了对任务进行管理的目的。由上述内容可知,本申请所提供的方案可以解决现有技术在对任务进行分布式处理过程中,无法对任务进行管理的技术问题。附图说明此处所说明的附图用来提供对本专利技术的进一步理解,构成本申请的一部分,本专利技术的示意性实施例及其说明用于解释本专利技术,并不构成对本专利技术的不当限定。在附图中:图1是根据本专利技术实施例的一种处理任务的方法流程图;图2是根据本专利技术实施例的一种可选的处理任务的系统结构示意图;图3是根据本专利技术实施例的一种可选的数据库列表的示意图;图4是根据本专利技术实施例的一种可选的客户端列表的示意图;图5是根据本专利技术实施例的一种可选的客户端列表的示意图;图6是根据本专利技术实施例的一种可选的界面示意图;以及图7是根据本专利技术实施例的一种处理任务的装置结构示意图。具体实施方式为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施本文档来自技高网
...

【技术保护点】
1.一种处理任务的方法,其特征在于,包括:/n获取至少一个任务组的任务组信息,其中,所述任务组信息至少包括如下之一:所述至少一个任务组的优先级以及所述至少一个任务组对应的节点数;/n基于客户端列表中所述任务组的优先级信息、所述至少一个任务组对应的节点数生成预设序列;/n基于所述预设序列以及至少一个节点发送的任务请求确定所述至少一个节点对应的目标任务组;/n控制所述至少一个节点执行所述目标任务组中的任务。/n

【技术特征摘要】
1.一种处理任务的方法,其特征在于,包括:
获取至少一个任务组的任务组信息,其中,所述任务组信息至少包括如下之一:所述至少一个任务组的优先级以及所述至少一个任务组对应的节点数;
基于客户端列表中所述任务组的优先级信息、所述至少一个任务组对应的节点数生成预设序列;
基于所述预设序列以及至少一个节点发送的任务请求确定所述至少一个节点对应的目标任务组;
控制所述至少一个节点执行所述目标任务组中的任务。


2.根据权利要求1所述的方法,其特征在于,在获取至少一个任务组的任务组信息之前,所述方法还包括:
创建所述至少一个任务组;
存储所述至少一个任务组的任务组信息至所述客户端列表中,其中,所述客户端列表为数据库中存储所述任务组信息的列表,所述任务组信息还包括如下至少之一:所述至少一个任务组的状态信息、所述至少一个任务组的重试次数,所述状态信息包括如下至少之一:开始状态、暂停状态以及失效状态。


3.根据权利要求2所述的方法,其特征在于,基于所述预设序列以及所述至少一个节点发送的任务请求确定所述至少一个节点对应的目标任务组,包括:
获取所述至少一个节点的请求时间与当前时间的第一时间差值;
滤除所述客户端列表中所述第一时间差值大于第一预设差值的任务,得到更新后的客户端列表;
基于所述预设序列以及所述更新后的客户端列表确定所述目标任务组。


4.根据权利要求1所述的方法,其特征在于,在控制所述至少一个节点执行所述目标任务组中的任务之后,所述方法还包括:
检测预设任务组的当前状态;
在所述预设任务组的当前状态为暂停状态的情况下,控制预设节点停止执行所述预设任务组中的任务,其中,所述预设节点为执行所述预设任务组中的任务的至少一个节点;
根据所述至少一个任务组的优先级为所述预设节点重新分配任务。


5.根据权利要求1所述的方法,其特征在于,在控制所述至少一个节点执行所述目标任务组中的任务之后,所述方法还包括:
存储所述至少一个节点执行目标任务时的执行信息至数据库中,其中,所述目标任务为所述目标任务组中所述至少一个节点所对应的任务;
检测所述至少一个节点执行所述目标任务时反馈的任务状态;
在所述任务状态为成功执行的情况...

【专利技术属性】
技术研发人员:赵振宇姜珂冯鸳鹤
申请(专利权)人:北京国双科技有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1