一种数据调度方法及装置制造方法及图纸

本申请公开了一种数据调度方法及装置，获取应用程序的任务数据，根据预设字段形式，将任务数据配置到数据库的预设表中，通过预先设定的调度任务参数，将数据库中的任务数据加载到任务驱动引擎中，通过预设调度参数执行任务驱动引擎中的任务数据。本方案在更新任务配置的过程中无需操作员登入应用服务器进行人工修改，只需通过利用数据库提供任务调度的数据依赖，实现了任务调度配置与业务代码之间的解耦、任务调度数据集中、便于维护等功能，并且提供了多种调度模式，如前后端分离、前端页面等方式可供选择，针对不同的调度模式，对任务状态和任务调度进行控制管理优化调度，从而确保任务调度稳定性与准确性，也提高了任务调度的效率。效率。效率。

【技术实现步骤摘要】
一种数据调度方法及装置


[0001]本申请涉及电子信息
，更具体地说，涉及一种数据调度方法及装置。

技术介绍

[0002]国内民航行业发展迅速，国内运价业务越来越多样化立体化，如何保证运价数据准确、快速、稳定地传送给数据消费者，给用户一个安全快捷的使用体验，便成了备受关注的问题。
[0003]为了将运价数据准确、快速、稳定地响应给数据消费者，需要对定时任务配置调度执行应用任务来将运价数据进行调度传送给数据消费者。
[0004]当前国内运价业务通过Linux服务器定时任务(corntab)配置调度执行应用任务，在更新任务配置的过程中，需操作员登入应用服务器进行人工修改，增加了操作风险，也无法确保任务调度的及时性和准确性。
[0005]因此，如何确保任务调度的及时性和准确性，是本申请亟需解决的问题。

技术实现思路

[0006]有鉴于此，本申请公开了一种数据调度方法及装置，旨在针对不同的调度模式，对任务状态和任务调度进行控制管理优化调度，从而确保任务调度稳定性与准确性，也提高了任务调度的效率。
[0007]为了实现上述目的，其公开的技术方案如下：
[0008]本申请第一方面公开了一种数据调度方法，所述方法包括：
[0009]获取应用程序的任务数据；所述任务数据表征应用程序的任务所属组和任务执行参数的数据；
[0010]根据预设字段形式，将所述任务数据配置到数据库的预设表中；
[0011]通过预先设定的调度任务参数，将所述数据库中的任务数据加载到任务驱动引擎中，并通过预设调度参数执行所述任务驱动引擎中的任务数据。
[0012]优选的，所述预设表包括任务日志表、任务表和任务资源表，所述根据预设字段形式，将所述任务数据配置到数据库中，包括：
[0013]通过调度接口的实现类和预设传入方法，将任务数据中的业务日志配置到数据库的所述任务日志表中；
[0014]将任务数据中的调度任务抽象接口的实现类的类路径配置到数据库的所述任务表中；
[0015]将任务数据中的任务作业资源配置到数据库的所述任务资源表中。
[0016]优选的，设定调度任务参数的过程，包括：
[0017]设定调度任务的触发时间、调度任务的触发参数、调度任务的触发节点、集群中调度程序的配置文件和集群名称。
[0018]优选的，所述通过预先设定的调度任务参数，将所述数据库中的任务数据加载到
任务驱动引擎中，并通过预设调度参数执行所述任务驱动引擎中的任务数据，包括：
[0019]通过程序实现调度框架接口部署任务程序并启动；
[0020]在所述任务程序运行后，通过预先设定的调度任务参数，将所述数据库中的任务数据加载到任务驱动引擎中；
[0021]判定执行所述任务驱动引擎中的任务数据的执行方式的类型；
[0022]若执行所述任务驱动引擎中的任务数据的执行方式为单点执行方式，通过所述调度任务的触发时间、调度任务的触发参数、调度任务的触发节点执行所述任务驱动引擎中的任务数据；
[0023]若执行所述任务驱动引擎中的任务数据的执行方式为多点执行方式，通过所述调度任务的触发时间、所述调度任务的触发参数、所述调度任务的触发节点、所述集群中调度程序的配置文件和所述集群名称执行所述任务驱动引擎中的任务数据。
[0024]优选的，在通过预设调度参数执行所述任务驱动引擎中的任务数据之后，还包括：
[0025]通过数据库的任务日志表查看任务运行状态及运行日志。
[0026]优选的，还包括：
[0027]通过数据库中的任务资源表，实时监控集群部署时各个节点的状态；所述状态包括离线状态或在线状态。
[0028]优选的，还包括：
[0029]通过任务数据实时监控任务日志和任务的集群执行节点地址。
[0030]本申请第二方面公开了一种数据调度装置，所述装置包括：
[0031]获取单元，用于获取应用程序的任务数据；所述任务数据表征应用程序的任务所属组和任务执行参数的数据；
[0032]配置单元，用于根据预设字段形式，将所述任务数据配置到数据库的预设表中；
[0033]加载执行单元，用于通过预先设定的调度任务参数，将所述数据库中的任务数据加载到任务驱动引擎中，并通过预设调度参数执行所述任务驱动引擎中的任务数据。
[0034]优选的，所述配置单元，包括：
[0035]第一配置模块，用于通过调度接口的实现类和预设传入方法，将任务数据中的业务日志配置到数据库的所述任务日志表中；
[0036]第二配置模块，用于将任务数据中的调度任务抽象接口的实现类的类路径配置到数据库的所述任务表中；
[0037]第三配置模块，用于将任务数据中的任务作业资源配置到数据库的所述任务资源表中。
[0038]优选的，设定调度任务参数的加载执行单元，具体用于：
[0039]设定调度任务的触发时间、调度任务的触发参数、调度任务的触发节点、集群中调度程序的配置文件和集群名称。
[0040]经由上述技术方案可知，本申请公开了一种数据调度方法及装置，获取应用程序的任务数据，任务数据表征应用程序的任务所属组和任务执行参数的数据，根据预设字段形式，将任务数据配置到数据库的预设表中，通过预先设定的调度任务参数，将数据库中的任务数据加载到任务驱动引擎中，并通过预设调度参数执行任务驱动引擎中的任务数据。本方案在更新任务配置的过程中无需操作员登入应用服务器进行人工修改，只需通过利用
数据库提供任务调度的数据依赖，实现了任务调度配置与业务代码之间的解耦、任务调度数据集中、便于维护等功能，并且提供了多种调度模式，如前后端分离、前端页面等方式可供选择，针对不同的调度模式，对任务状态和任务调度进行控制管理优化调度，从而确保任务调度稳定性与准确性，也提高了任务调度的效率。
附图说明
[0041]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
[0042]图1为本申请实施例公开的任务调度中心系统的架构图；
[0043]图2为本申请实施例公开的任务调度中心的关系示意图；
[0044]图3为本申请实施例公开的一种数据调度方法的流程示意图；
[0045]图4为本申请实施例公开的一种数据调度装置的结构示意图；
[0046]图5为本申请实施例公开的一种电子设备的结构示意图。
具体实施方式
[0047]下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据调度方法，其特征在于，所述方法包括：获取应用程序的任务数据；所述任务数据表征应用程序的任务所属组和任务执行参数的数据；根据预设字段形式，将所述任务数据配置到数据库的预设表中；通过预先设定的调度任务参数，将所述数据库中的任务数据加载到任务驱动引擎中，并通过预设调度参数执行所述任务驱动引擎中的任务数据。2.根据权利要求1所述的方法，其特征在于，所述预设表包括任务日志表、任务表和任务资源表，所述根据预设字段形式，将所述任务数据配置到数据库中，包括：通过调度接口的实现类和预设传入方法，将任务数据中的业务日志配置到数据库的所述任务日志表中；将任务数据中的调度任务抽象接口的实现类的类路径配置到数据库的所述任务表中；将任务数据中的任务作业资源配置到数据库的所述任务资源表中。3.根据权利要求1所述的方法，其特征在于，设定调度任务参数的过程，包括：设定调度任务的触发时间、调度任务的触发参数、调度任务的触发节点、集群中调度程序的配置文件和集群名称。4.根据权利要求3所述的方法，其特征在于，所述通过预先设定的调度任务参数，将所述数据库中的任务数据加载到任务驱动引擎中，并通过预设调度参数执行所述任务驱动引擎中的任务数据，包括：通过程序实现调度框架接口部署任务程序并启动；在所述任务程序运行后，通过预先设定的调度任务参数，将所述数据库中的任务数据加载到任务驱动引擎中；判定执行所述任务驱动引擎中的任务数据的执行方式的类型；若执行所述任务驱动引擎中的任务数据的执行方式为单点执行方式，通过所述调度任务的触发时间、调度任务的触发参数、调度任务的触发节点执行所述任务驱动引擎中的任务数据；若执行所述任务驱动引擎中的任务数据的执行方式为多点执行方式，通过所述调...

【专利技术属性】
技术研发人员：王思宁，蒋晓莲，杨程，鞠春生，刘冰，曹旭，由天宇，张鑫淼，
申请(专利权)人：中国民航信息网络股份有限公司，
类型：发明
国别省市：