数据处理控制方法、装置、计算机设备和数据处理系统制造方法及图纸

本申请涉及一种数据处理控制方法、装置、计算机设备、存储介质、计算机程序产品和数据处理系统，涉及大数据技术领域，可用于金融科技领域或其他相关领域。所述方法包括：接收终端发送的针对目标数据处理任务的任务指令，任务指令包括目标地区标识、以及目标开放平台标识；从主机数据库中获取目标地区标识对应的主机数据，并对主机数据进行第一数据处理；将处理后的主机数据发送给多个开放平台中目标开放平台标识对应的目标开放平台，以使目标开放平台根据处理后的主机数据进行第二数据处理，以使完成目标数据处理任务。采用本方法能够节约计算资源、提高数据处理效率。提高数据处理效率。提高数据处理效率。

【技术实现步骤摘要】
数据处理控制方法、装置、计算机设备和数据处理系统


[0001]本申请涉及大数据
，特别是涉及一种数据处理控制方法、装置、计算机设备、存储介质、计算机程序产品和数据处理系统。

技术介绍

[0002]随着经济的快速发展，人们的金融行为不断增加，金融业务交易量呈爆炸式的持续增长，形成了海量的金融业务数据，因而对各金融机构的数据处理系统的处理能力和安全可靠性提出了新的要求。目前各金融机构的数据处理系统，大多以主机系统为核心(如IBM大型主机)，并结合多个开放平台提供辅助功能，从而完成海量金融业务数据的处理任务。
[0003]在金融机构的日常生产场景中，每日都需要对全量的金融业务数据进行处理，例如可以在当日日终后的预设时段内，由主机系统对当日的全量业务数据进行批量处理(如对交易数据和账户数据的统计分析等)，然后将处理后的数据分发给多个开放平台(如信贷管理平台、资产管理平台等)，使各开放平台进行后续处理，以完成每日的数据处理任务。
[0004]然而在一些特殊的场景中，如版本测试、灾备演练等，一般只需要对部分业务数据进行处理即可，若采用日常的数据处理方式对全量业务数据进行处理，则会导致计算资源的浪费，且处理效率较低。

技术实现思路

[0005]基于此，有必要针对上述技术问题，提供一种能够节约计算资源、提高处理效率的数据处理控制方法、装置、计算机设备、存储介质、计算机程序产品和数据处理系统。
[0006]第一方面，本申请提供了一种数据处理控制方法。所述方法应用于数据处理系统中的主机系统，所述数据处理系统还包括终端、以及多个开放平台，所述方法包括：
[0007]接收所述终端发送的针对目标数据处理任务的任务指令，所述任务指令包括目标地区标识、以及目标开放平台标识；
[0008]从主机数据库中获取所述目标地区标识对应的主机数据，并对所述主机数据进行第一数据处理；
[0009]将所述处理后的主机数据发送给所述多个开放平台中所述目标开放平台标识对应的目标开放平台，以使所述目标开放平台根据所述处理后的主机数据进行第二数据处理，以使完成所述目标数据处理任务。
[0010]在其中一个实施例中，所述从主机数据库中获取所述目标地区标识对应的主机数据，并对所述主机数据进行第一数据处理，包括：
[0011]根据预先存储的批次标识表，确定各所述目标地区标识对应的各批次标识，所述批次标识表包含批次标识与地区标识的对应关系；
[0012]从主机数据库中获取各所述批次标识下各所述目标地区标识对应的主机数据；
[0013]对各所述批次标识下的所述主机数据进行并行批量处理。
[0014]在其中一个实施例中，所述方法还包括：
[0015]在未接收到所述终端发送的针对目标数据处理任务的任务指令的情况下，从所述主机数据库中获取全量的主机数据，并对所述全量的主机数据进行第三数据处理；
[0016]将所述处理后的全量的主机数据发送给所述多个开放平台，以使各所述开放平台根据所述处理后的全量的主机数据进行第四数据处理。
[0017]第二方面，本申请还提供了另一种数据处理控制方法。所述方法应用于数据处理系统中的终端，所述数据处理系统还包括主机系统、以及多个开放平台，所述方法包括：
[0018]获取目标数据处理任务对应的目标地区标识、以及目标开放平台标识；
[0019]根据所述目标地区标识、以及所述目标开放平台标识，生成针对所述目标数据处理任务的任务指令；
[0020]将所述任务指令发送给所述主机系统，以使所述主机系统从主机数据库中获取所述目标地区标识对应的主机数据，对所述主机数据进行第一数据处理，并将所述处理后的主机数据发送给所述多个开放平台中与所述目标开放平台标识对应的目标开放平台，以使所述目标开放平台根据所述处理后的主机数据进行第二数据处理，以使完成所述目标数据处理任务。
[0021]在其中一个实施例中，所述获取目标数据处理任务对应的目标地区标识、以及目标开放平台标识，包括：
[0022]获取目标数据处理任务的通知文件；
[0023]对所述通知文件进行识别，确定所述通知文件包含的地名、以及业务标识；
[0024]根据所述地名确定目标地区标识；
[0025]根据所述业务标识，在预先存储的开放平台标识与业务标识的对应关系中，确定目标开放平台标识。
[0026]在其中一个实施例中，所述方法还包括：
[0027]将所述任务指令发送给所述多个开放平台中所述目标开放平台标识对应的目标开放平台，以使所述目标开放平台根据所述任务指令包含的所述目标地区标识，从所述目标开放平台对应的平台数据库中获取所述目标地区标识对应的平台数据，并根据所述平台数据和所述主机系统发送的所述处理后的主机数据，进行第二数据处理，以使完成所述目标数据处理任务。
[0028]第三方面，本申请还提供了另一种数据处理控制方法。所述方法应用于数据处理系统中的开放平台，所述数据处理系统还包括主机系统、以及终端，所述方法包括：
[0029]接收所述终端发送的针对目标数据处理任务的任务指令，确定所述任务指令包含的目标地区标识；
[0030]从平台数据库中获取所述目标地区标识对应的平台数据；
[0031]接收所述主机系统发送的处理后的主机数据，根据所述平台数据和所述处理后的主机数据，进行第二数据处理，以使完成所述目标数据处理任务；其中，所述主机系统发送的处理后的主机数据，是所述主机系统根据所述终端发送的所述任务指令，从主机数据库中获取所述任务指令包含的所述目标地区标识对应的主机数据，并对所述主机数据进行第一数据处理得到的。
[0032]第四方面，本申请还提供了一种数据处理控制装置。所述装置包括：
[0033]接收模块，用于接收所述终端发送的针对目标数据处理任务的任务指令，所述任务指令包括目标地区标识、以及目标开放平台标识；
[0034]第一处理模块，用于从主机数据库中获取所述目标地区标识对应的主机数据，并对所述主机数据进行第一数据处理；
[0035]发送模块，用于将所述处理后的主机数据发送给所述多个开放平台中所述目标开放平台标识对应的目标开放平台，以使所述目标开放平台根据所述处理后的主机数据进行第二数据处理，以使完成所述目标数据处理任务。
[0036]在其中一个实施例中，所述第一处理模块具体用于：
[0037]根据预先存储的批次标识表，确定各所述目标地区标识对应的各批次标识，所述批次标识表包含批次标识与地区标识的对应关系；从主机数据库中获取各所述批次标识下各所述目标地区标识对应的主机数据；对各所述批次标识下的所述主机数据进行并行批量处理。
[0038]在其中一个实施例中，所述装置还包括第二处理模块，用于在未接收到所述终端发送的针对目标数据处理任务的任务指令的情况下，从所述主机数据库中获取全量的主机数据，并对所述全量的主机数据进行第三数据处理；将所述处理后的全量的主机数据发送本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理控制方法，其特征在于，所述方法应用于数据处理系统中的主机系统，所述数据处理系统还包括终端、以及多个开放平台，所述方法包括：接收所述终端发送的针对目标数据处理任务的任务指令，所述任务指令包括目标地区标识、以及目标开放平台标识；从主机数据库中获取所述目标地区标识对应的主机数据，并对所述主机数据进行第一数据处理；将所述处理后的主机数据发送给所述多个开放平台中所述目标开放平台标识对应的目标开放平台，以使所述目标开放平台根据所述处理后的主机数据进行第二数据处理，以使完成所述目标数据处理任务。2.根据权利要求1所述的方法，其特征在于，所述从主机数据库中获取所述目标地区标识对应的主机数据，并对所述主机数据进行第一数据处理，包括：根据预先存储的批次标识表，确定各所述目标地区标识对应的各批次标识，所述批次标识表包含批次标识与地区标识的对应关系；从主机数据库中获取各所述批次标识下各所述目标地区标识对应的主机数据；对各所述批次标识下的所述主机数据进行并行批量处理。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：在未接收到所述终端发送的针对目标数据处理任务的任务指令的情况下，从所述主机数据库中获取全量的主机数据，并对所述全量的主机数据进行第三数据处理；将所述处理后的全量的主机数据发送给所述多个开放平台，以使各所述开放平台根据所述处理后的全量的主机数据进行第四数据处理。4.一种数据处理控制方法，其特征在于，所述方法应用于数据处理系统中的终端，所述数据处理系统还包括主机系统、以及多个开放平台，所述方法包括：获取目标数据处理任务对应的目标地区标识、以及目标开放平台标识；根据所述目标地区标识、以及所述目标开放平台标识，生成针对所述目标数据处理任务的任务指令；将所述任务指令发送给所述主机系统，以使所述主机系统从主机数据库中获取所述目标地区标识对应的主机数据，对所述主机数据进行第一数据处理，并将所述处理后的主机数据发送给所述多个开放平台中与所述目标开放平台标识对应的目标开放平台，以使所述目标开放平台根据所述处理后的主机数据进行第二数据处理，以使完成所述目标数据处理任务。5.根据权利要求4所述的方法，其特征在于，所述获取目标数据处理任务对应的目标地区标识、以及目标开放平台标识，包括：获取目标数据处理任务的通知文件；对所述通知文件进行识别，确定所述通知文件包含的地名、以及业务标识；根据所述地名确定目标地区标识；根据所述业务标识，在预先存储的开放平台标识与业务标识的对应关系中，确定目标开放平台标识。6.根据权利要求4所述的方法，其特征在于，所述方法还包括：将所述任务指令发送给所述多个开放平台中所述目标开放平台标识对应的目标开放
平台，以使所述目标开放平台根据所述任务指令包含的所述目标地区标识，从所述目标开放平台对应的平台数据库中获取所述目标地区标识对应的平台数据，并根据所述平台数据和所述主机系统发送的所述处理后的主机数据，进行第二数据处理，以使完成所述目标数据处理任务。7.一种数据处理控制方法，其特征在于，所述方法应用于数据处理系统中的开放平台，所述数据处理系统还包括主机系统、以及终端，所述方法包括：接收所述终端发送的针对目标数据处理任务的任务指令，确定所述任务指令包含的目标地区标识；从平台数据库中获取所述目标地区标识对应的平台数据；接收所述主机系统发送的处理后的主机数据，根据所述平台数据和所述处理后的主机数据，进行第二数据处理，以使完成所述目标数据处理任务；其中，所述主机系统发送的处理后的主机数据，是所述主机系统根...

【专利技术属性】
技术研发人员：杨玉新，胡威予，贝飞，王诗章，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：