作业处理方法和系统技术方案

本发明专利技术提供了作业处理方法和系统，所述方法包括：当待处理的作业为大作业时，获取所述大作业预先定义好的拆分算法；将所述拆分算法和大作业发送给中间服务器，以便于应用集群中的可用应用端获取所述拆分算法，并执行所述拆分算法将所述大作业拆分成分作业；接收所述应用端经中间服务器返回的所述分作业；将所述分作业经中间服务器分发给应用集群中的应用端，以便于应用端执行所述分作业。通过本发明专利技术实施例，将一个大作业拆分成多个分作业由多个应用端并发执行，缩短了作业执行时间，从而提高了作业的处理效率。

【技术实现步骤摘要】

本专利技术涉及数据处理
，更具体的说是涉及一种作业处理方法和系统。
技术介绍
作业一般是指放在后台运行并且不需要与用户进行交互的、大数据量的处理程序，批量作业即是指这样的批量处理程序。在很多大中型企业，尤其是金融、电信等领域的信息系统当中，都存在大量的复杂的自动化批量处理业务需求。显著增多的多样性的任务已代替了早先的批量作业，并且作业的规模与复杂性仍在持续的上扬。面对企业信息化的飞速发展的需要，对批量处理系统在性能、开发框架统一化等方面的研究也越来越深入。目前，一种批量处理系统，设置有总控端和多个应用端组成的应用集群，总控端是批量作业处理的控制者和发起者，应用端是完成批量作业的业务操作的接收者和执行者。由总控端获取批量作业以及待处理的数据，从数据库中获取批量作业的执行顺序，将作业进行分发，由应用集群中的多个应用端获取并执行所述作业，从而完成作业要执行的任务。在这种批量处理系统中，由总控端将需要批量处理的作业分发给多个应用端执行，使得作业分发和作业执行分开，从而可提高批量作业的处理效率。但是，在这种批量处理系统中，虽然可以将批量作业分发给多个应用端执行，但是一个作业只能在一个应本文档来自技高网...

【技术保护点】
１．一种作业处理方法，其特征在于，所述方法包括：当待处理的作业为大作业时，获取所述大作业预先定义好的拆分算法；将所述拆分算法和大作业发送给中间服务器，以便于应用集群中的可用应用端获取所述拆分算法，并执行所述拆分算法将所述大作业拆分成分作业；接收所述可用应用端经中间服务器返回的所述分作业；将所述分作业经中间服务器分发给应用集群中的应用端，以便于应用端执行所述分作业。

【技术特征摘要】
1.一种作业处理方法，其特征在于，所述方法包括：当待处理的作业为大作业时，获取所述大作业预先定义好的拆分算法；将所述拆分算法和大作业发送给中间服务器，以便于应用集群中的可用应用端获取所述拆分算法，并执行所述拆分算法将所述大作业拆分成分作业；接收所述可用应用端经中间服务器返回的所述分作业；将所述分作业经中间服务器分发给应用集群中的应用端，以便于应用端执行所述分作业。2.根据权利要求1所述的方法，其特征在于，还包括：当确定可用应用端执行所述拆分算法失败时，将所述大作业经中间服务器发送给应用端，以便于应用端执行所述大作业。3.根据权利要求2所述的方法，其特征在于，确定可用应用端执行所述拆分算法失败包括：当接收到可用应用端经中间服务器返回的错误信息时，确定可用应用端执行所述拆分算法失败。4.根据权利要求1所述的方法，其特征在于，当所述待处理的大作业数量为多个时，所述将所述分作业经中间服务器分发给应用集群中的应用端包括：将不同大作业拆分出的分作业按照原有大作业间的逻辑关系进行组合；将所述组合后的分作业经中间服务器分发给应用集群中的应用端。5.根据权利要求1所述的方法，其特征在于，所述拆分算法根据所述大作业实现的业务操作的业务规则定义。6.一种作业处理系统，其特征在于，所述系统包括总控端、中间服务器和由应用端组成的应用集群，所述总控端，用于当待处理的作业为大作业时，获取所述大作业预先定义好的拆分算法；将所述拆分算...

【专利技术属性】
技术研发人员：朱玥，邓伟仲，聂经纬，
申请(专利权)人：中国农业银行股份有限公司，
类型：发明
国别省市：11