一种异步批量任务处理方法及系统技术方案

技术编号:13008186 阅读:55 留言:0更新日期:2016-03-10 21:58
本申请公开了一种异步批量任务处理方法及系统,包括:接收异步批量任务请求,依据事件参数生成与批量任务请求对应的事件信息,依据任务类型生成与批量任务请求对应的任务信息,轮询任务队列,在查找到符合待处理条件的任务,且,具有空闲线程时,按照预设顺序,利用空闲线程,对符合待处理条件的任务发起任务执行线程,执行任务处理过程,直到任务队列中的全部任务被处理完经由上述的技术方案可知,本申请公开的异步批量任务处理方法中,批量任务以异步任务的形式进行处理,通过将批量任务生成任务队列,并在具有空闲进程时,对队列中的任务进行顺序处理,实现对批量任务的异步处理,缩短了任务处理时间,减少了用户等待时间,提升了用户体验。

【技术实现步骤摘要】

本申请涉及数据处理
,尤其涉及一种异步批量任务处理方法及系统
技术介绍
随着经济的发展,银行系统越来越广泛的进入到人们的日常生活当中,银行为服务用户,其推出的各种业务也日益繁多。这就使得银行数据处理系统需要面临庞大的数据处理任务。而处理这些任务,则需要较长的时间,相应的,用户的等待时间就就会增长,因此,在一定程度上影响了用户体验。如何快速有效的处理这些任务,已经成为银行数据处理系统面临的首要问题。
技术实现思路
有鉴于此,本申请提供了一种异步批量任务处理方法及系统,以实现快速有效处理任务的目的。为实现上述目的,本申请提供如下技术方案:一种异步批量任务处理方法,包括:接收异步批量任务请求,所述请求中包含有异步批量任务中各个任务的任务类型和事件参数,依据所述事件参数生成与所述批量任务请求对应的事件信息,所述事件信息包括:包含有各个任务提交时间的时间队列,以及各个任务对应的时间参数,依据所述任务类型生成与所述批量任务请求对应的任务信息,所述任务信息包括:包含有各个任务的任务队列,以及各个任务对应的任务步骤;轮询所述任务队列,在查找到符合待处理条件的任务,且,具有空闲线程时,按照预设顺序,利用所述空闲线程,对所述符合待处理条件的任务发起任务执行线程,执行任务处理过程,直到所述任务队列中的全部任务被处理完;所述任务处理过程包括:查询所述符合待处理条件的任务对应的任务步骤,依照所述任务步骤对所述符合待处理条件的任务进行处理,当所述符合待处理条件的任务处理成功时,记录所述符合待处理条件的任务的开始处理时间和处理结束时间,并记录其任务状态为已处理。优选的,所述任务处理过程还包括:当所述符合待处理条件的任务处理不成功时,记录所述任务的状态为处理失败。优选的,所述任务处理过程还包括:接收暂停指令,暂停当前被处理的任务,并记录所述任务的状态为暂停。优选的,所述接收批量任务请求包括:接收用户实时发送的异步批量任务请求;或;接收符合定时发送条件时服务器发送的定时异步批量任务请求。优选的,所述任务信息还包括:各个任务的允许开始时间、允许结束时间和优先级。优选的,所述查找符合待处理条件的任务的过程包括:查找任务状态为待处理、处理失败或暂停且当前时间在允许时间段内的任务为符合待处理条件的任务。优选的,所述预设顺序包括:将所述符合待处理条件的任务按照优先级进行排序,优先级高则优先处理;当有多个任务为同一优先级时,按照所述任务提交时间进行排序,提交时间早的则优先处理。优选的,所述对所述符合待处理条件的任务发起任务执行线程步骤后,还包括:修改所述符合待处理条件的任务的状态为处理中。优选的,所述依照所述任务步骤对所述符合待处理条件的任务进行处理的过程包括:判断当前步骤是否可行,若可行,则判断当前步骤与其后续步骤是否可并发处理,若可以,则发起并发处理线程,并发处理所述当前步骤和后续步骤,所述并发处理线程的个数与所述当前步骤和后续步骤个数之和相同;若所述当前步骤可行,所述当前步骤的后续步骤不可并发处理,则执行所述当前步骤;若所述当前步骤不可行,则结束处理该任务。一种异步批量任务处理系统,包括:任务接收器,用于接收异步批量任务请求,所述请求中包含有异步批量任务中各个任务的任务类型和事件参数,据所述事件参数生成与所述批量任务请求对应的事件信息,所述事件信息包括:包含有各个任务提交时间的时间队列,以及各个任务对应的时间参数,依据所述任务类型生成与所述批量任务请求对应的任务信息,所述任务信息包括:包含有各个任务的任务队列,以及各个任务对应的任务步骤;调度主控器,用于轮询所述任务队列,在查找到符合待处理条件的任务,且,具有空闲线程时,按照预设顺序,利用所述空闲线程,对所述符合待处理条件的任务发起任务执行线程,执行下述任务处理过程,直到所述任务队列中的全部任务被处理完;任务执行器,用于查询所述符合待处理条件的任务对应的任务步骤,依照所述任务步骤对所述符合待处理条件的任务进行处理,当所述符合待处理条件的任务处理成功时,记录所述符合待处理条件的任务的开始处理时间和处理结束时间,并记录其任务状态为已处理。经由上述的技术方案可知,本申请公开的异步批量任务处理方法中,批量任务以异步任务的形式进行处理,通过将批量任务生成任务队列,并在具有空闲进程时,对队列中的任务进行顺序处理,实现对批量任务的异步处理,缩短了任务处理时间,减少了用户等待时间,提升了用户体验。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。图1为本申请实施例公开的异步批量任务处理方法的流程图;图2为本申请实施例公开的又一异步批量任务处理方法的流程图;图3为本申请实施例公开的又一异步批量任务处理方法的流程图;图4为本申请实施例公开的一种异步批量任务处理系统的结构示意图。具体实施方式下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。本申请实施例公开的批量任务处理方法的流程如图1所示,包括:步骤S101:接收异步批量任务请求,所述请求中包含有异步批量任务中各个任务的任务类型和事件参数;在本实施例中,事件接收器接收异步批量任务请求,该请求包括由用户实时发送的异步批量任务请求,例如,在前端界面点击缴费入账,则事件接收器接收到一个任务请求,其事件参数包括:缴费到账、提交时间、提交人、缴费到账单据号、计划编码,或者,接收符合定时发送条件时,定时主控器发送的定时异步批量任务请求,例如,任务类型为每日批量的定时事件请求,事件参数包括:任务类型、提交时间、上次执行日期、上次执行时间等。步骤S102:依据所述事件参数生成与所述批量任务请求对应的事件信息,所述事件信息包括:包含有各个任务提交时间的时间队列,以及各个任务对应的时间参数,依据所述任务类型生成与所述批量任务本文档来自技高网...
一种异步批量任务处理方法及系统

【技术保护点】
一种异步批量任务处理方法,其特征在于,包括:接收异步批量任务请求,所述请求中包含有异步批量任务中各个任务的任务类型和事件参数,依据所述事件参数生成与所述批量任务请求对应的事件信息,所述事件信息包括:包含有各个任务提交时间的时间队列,以及各个任务对应的时间参数,依据所述任务类型生成与所述批量任务请求对应的任务信息,所述任务信息包括:包含有各个任务的任务队列,以及各个任务对应的任务步骤;轮询所述任务队列,在查找到符合待处理条件的任务,且,具有空闲线程时,按照预设顺序,利用所述空闲线程,对所述符合待处理条件的任务发起任务执行线程,执行任务处理过程,直到所述任务队列中的全部任务被处理完;所述任务处理过程包括:查询所述符合待处理条件的任务对应的任务步骤,依照所述任务步骤对所述符合待处理条件的任务进行处理,当所述符合待处理条件的任务处理成功时,记录所述符合待处理条件的任务的开始处理时间和处理结束时间,并记录其任务状态为已处理。

【技术特征摘要】
1.一种异步批量任务处理方法,其特征在于,包括:
接收异步批量任务请求,所述请求中包含有异步批量任务中各个任务的
任务类型和事件参数,依据所述事件参数生成与所述批量任务请求对应的事
件信息,所述事件信息包括:包含有各个任务提交时间的时间队列,以及各
个任务对应的时间参数,依据所述任务类型生成与所述批量任务请求对应的
任务信息,所述任务信息包括:包含有各个任务的任务队列,以及各个任务
对应的任务步骤;
轮询所述任务队列,在查找到符合待处理条件的任务,且,具有空闲线
程时,按照预设顺序,利用所述空闲线程,对所述符合待处理条件的任务发
起任务执行线程,执行任务处理过程,直到所述任务队列中的全部任务被处
理完;
所述任务处理过程包括:查询所述符合待处理条件的任务对应的任务步
骤,依照所述任务步骤对所述符合待处理条件的任务进行处理,当所述符合
待处理条件的任务处理成功时,记录所述符合待处理条件的任务的开始处理
时间和处理结束时间,并记录其任务状态为已处理。
2.根据权利要求1所述的方法,其特征在于,所述任务处理过程还包括:
当所述符合待处理条件的任务处理不成功时,记录所述任务的状态为处
理失败。
3.根据权利要求2所述的方法,其特征在于,所述任务处理过程还包括:
接收暂停指令,暂停当前被处理的任务,并记录所述任务的状态为暂停。
4.根据权利要求3所述的方法,其特征在于,所述接收批量任务请求包
括:
接收用户实时发送的异步批量任务请求;
或;
接收符合定时发送条件时服务器发送的定时异步批量任务请求。
5.根据权利要求4所述的方法,其特征在于,所述任务信息还包括:各
个任务的允许开始时间、允许结束时间和优先级。
6.根据权利要求5所述的方法,其特征在于,所述查找符合待处理条件
的任务的过程包括:
查找任务状态为待处理、处理失败或暂停且当前时间在允许时间段内的
任务为符合待处理条件的任务。
7.根据权利要求6所述的方法,其特征在于,所述预设顺...

【专利技术属性】
技术研发人员:杨林陈刚陈悌宇蒋玉树冯德虎
申请(专利权)人:中国建设银行股份有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1