大数据平台构建方法、装置、设备、介质及产品制造方法及图纸

本申请公开了一种大数据平台构建方法、装置、设备、介质及产品。该大数据平台构建方法包括：通过至少一个源系统的系统信息、初始GSDM模型以及服务需求，确定目标GSDM模型，目标GSDM模型包括至少一个功能单元；基于至少一个功能单元的第一设计方案，得到目标GSDM模型的目标设计方案；根据目标设计方案，将各功能单元的第一设计方案对应的应用代码组合，得到目标大数据平台；对目标大数据平台进行测试，得到测试结果；在测试结果指示目标大数据平台测试通过的情况下，在生产环境中运行目标大数据平台，从而可以是大数据平台的构建标准化、规范化。根据本申请实施例，可以对数据平台的构建标准化，提高大数据平台构建工作的效率和质量。量。量。

【技术实现步骤摘要】
大数据平台构建方法、装置、设备、介质及产品


[0001]本申请属于大数据
，尤其涉及一种大数据平台构建方法、装置、设备、介质及产品。

技术介绍

[0002]“政务服务”是指各政府、各相关部门及事业单位，根据法律法规，为社会团体、企事业单位和个人提供的许可、确认、裁决、奖励、处罚等行政服务。当前各地政务服务部门都需要在政务服务事项管理系统中录入或维护政务事项的实施清单要素，来进行所管辖政务服务事项的梳理工作。
[0003]目前，政务服务产生的数据主要存储在各部门内的单一数据库中，导致存在着大量的“信息孤岛”，绝大部分信息系统不能和外界实现数据共享，因此需要构建政务大数据平台，利用大数据技术对政务数据进行融合利用。
[0004]然而，现有的大数据平台构建方法，在整个项目开发周期并没有形成统一的实施工艺规范，不具备工程化实施能力，没有对整个大数据项目的整个生命周期的实施工艺规范，不利项目开发的效率。

技术实现思路

[0005]本申请实施例提供一种大数据平台构建方法、装置、设备、介质及产品，能够提高大数据平台构建工作的效率和质量。
[0006]第一方面，本申请实施例提供一种大数据平台构建方法，该方法包括：
[0007]基于至少一个源系统的系统信息、初始GSDM模型以及服务需求，确定目标GSDM模型，所述目标GSDM模型包括至少一个功能单元；
[0008]基于所述至少一个功能单元的第一设计方案，得到目标GSDM模型的目标设计方案；
[0009]根据所述目标设计方案，将各功能单元的第一设计方案对应的应用代码组合，得到目标大数据平台；
[0010]对所述目标大数据平台进行测试，得到测试结果；
[0011]在所述测试结果指示所述目标大数据平台测试通过的情况下，在生产环境中运行所述目标大数据平台。
[0012]第二方面，本申请实施例提供了一种大数据平台构建装置，该装置包括：
[0013]第一确定模块，用于基于至少一个源系统的系统信息、初始GSDM模型以及服务需求，确定目标GSDM模型，所述目标GSDM模型包括至少一个功能单元；
[0014]第二确定模块，用于基于所述至少一个功能单元的第一设计方案，得到目标GSDM模型的目标设计方案；
[0015]第三确定模块，用于根据所述目标设计方案，将各功能单元的第一设计方案对应的应用代码组合，得到目标大数据平台；
[0016]测试模块，用于对所述目标大数据平台进行测试，得到测试结果；
[0017]运行模块，用于在所述测试结果指示所述目标大数据平台测试通过的情况下，在生产环境中运行所述目标大数据平台。
[0018]第三方面，本申请实施例提供了一种电子设备，该设备包括：处理器以及存储有计算机程序指令的存储器；
[0019]处理器执行所述计算机程序指令时实现如第一方面的任一项实施例中所述的大数据平台构建方法的步骤。
[0020]第四方面，本申请实施例提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序指令，计算机程序指令被处理器执行时实现如第一方面的任一项实施例中所述的大数据平台构建方法的步骤。
[0021]第五方面，本申请实施例提供了一种计算机程序产品，计算机程序产品中的指令由电子设备的处理器执行时，使得所述电子设备执行如第一方面的任一项实施例中所述的大数据平台构建方法的步骤。
[0022]本申请实施例中的大数据平台构建方法、装置、设备、介质及产品，通过至少一个源系统的系统信息、初始GSDM模型以及服务需求，确定目标GSDM模型，目标GSDM模型包括至少一个功能单元；基于至少一个功能单元的第一设计方案，得到目标GSDM模型的目标设计方案；根据目标设计方案，将各功能单元的第一设计方案对应的应用代码组合，得到目标大数据平台；对目标大数据平台进行测试，得到测试结果；在测试结果指示目标大数据平台测试通过的情况下，在生产环境中运行目标大数据平台，从而可以是大数据平台的构建标准化、规范化。这样，构建倒数据平台采用规范化的流程，可以提高大数据平台构建工作的质量，减少出错几率，提高效率。
附图说明
[0023]为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单的介绍，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0024]图1是本申请实施例提供的一种大数据平台构建方法的流程示意图；
[0025]图2是本申请实施例提供的一种大数据平台构建装置的结构示意图；
[0026]图3是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
[0027]下面将详细描述本申请的各个方面的特征和示例性实施例，为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及具体实施例，对本申请进行进一步详细描述。应理解，此处所描述的具体实施例仅意在解释本申请，而不是限定本申请。对于本领域技术人员来说，本申请可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本申请的示例来提供对本申请更好的理解。
[0028]需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖
非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括
……”
限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0029]本申请技术方案中对数据的获取、存储、使用、处理等均符合国家法律法规的相关规定。
[0030]政务大数据：政务相关的数据，政府部门提供政务服务的基础和成果。
[0031]实施工艺：用于指导和规范数据资源中心建设、项目实施以及应用开发过程的一系列技术规范集合。
[0032]贴源层：存放与源系统保持一致的数据，采集的业务系统产生的数据以及外部数据，将所采集的数据汇总到一起，供下游使用。
[0033]整合层：按照主题模型划分将各个来源的数据进行整合，使采集到平台的数据更方便管理与使用。
[0034]应用层：以应用服务为导向，按照应用需求加工，直接供应用使用的数据层。
[0035]GSDM：政务服务数据模型(Government Service Data Model，GSDM)。政务服务数据模型是在参与智慧政务建设过程中，基于政务事项、政府数据平台中数据需求，参照国家标准《政务服务平台基础数据规范》、政务服务接口数据标准化等，借鉴建设银行新一代核心系统建设形成的企业级业务模型中的数据建模成果，本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种大数据平台构建方法，其特征在于，包括：基于至少一个源系统的系统信息、初始GSDM模型以及服务需求，确定目标GSDM模型，所述目标GSDM模型包括至少一个功能单元；基于所述至少一个功能单元的第一设计方案，得到目标GSDM模型的目标设计方案；根据所述目标设计方案，将各功能单元的第一设计方案对应的应用代码组合，得到目标大数据平台；对所述目标大数据平台进行测试，得到测试结果；在所述测试结果指示所述目标大数据平台测试通过的情况下，在生产环境中运行所述目标大数据平台。2.根据权利要求1所述的方法，其特征在于，所述基于至少一个源系统的系统信息、初始GSDM模型以及服务需求，确定目标GSDM模型的至少一个功能单元，包括：获取各所述源系统的系统基础信息、数据库信息以及业务信息；根据所述系统属性信息、数据库信息以及业务信息、初始GSDM模型，将预设功能单元以及所述预设功能单元属性与所述初始GSDM模型进行映射，得到初始模型映射；基于服务需求对所述初始模型映射进行校验和调整，确定至少一个功能单元与所述初始GSDM模型映射关系；基于所述至少一个功能单元与所述初始GSDM模型映射关系，得到目标GSDM模型。3.根据权利要求2所述的方法，其特征在于，所述系统基础信息包括源系统的数据字典、功能设计说明书、操作手册、系统报表清单、数据流程图与外部数据交换关系、建表语句、E
‑
R图等信息中的至少一项；所述数据库信息包括业务表数据信息，字段空值率，码值等信息中的至少一项；所述业务信息包括业务信息目录。4.根据权利要求1所述的方法，其特征在于，所述基于所述至少一个功能单元的第一设计方案，得到目标GSDM模型的设计方案，包括：根据数据采集设计方案、贴源层设计方案、标准化设计方案、整合层物理表设计方案、数据校验设计方案、调度设计方案，得到目标GSDM模型的设计方案。5.根据权利要求1所述的方法，其特征在于，所述根据所述目标设计方案，将各功能单元的第...

【专利技术属性】
技术研发人员：王宸，
申请(专利权)人：建信金融科技有限责任公司，
类型：发明
国别省市：