一种面向教育领域数据集成及标准管理系统技术方案

本发明专利技术公开了一种面向教育领域数据集成及标准管理系统，包括数据标准管理单元、数据源接入模块、数据集成单元及任务调度与执行单元，所述数据标准管理单元用于数据标准管理，所述数据源接入模块用于接入数据源的管理，以及对该数据源进行元数据采集，所述数据集成单元用于ETL流程管理、ETL任务管理及ETL任务监控，所述任务调度与执行单元用于将任务的配置与调度执行分离。与调度执行分离。

【技术实现步骤摘要】
一种面向教育领域数据集成及标准管理系统


[0001]本专利技术涉及数据处理
，具体涉及一种面向教育领域数据集成及标准管理系统。

技术介绍

[0002]数据已经成为一种生产要素，其重要性正在日益凸显，科学合理的数据治理体系，是数据安全和数据价值的规范性保障，教育领域对数据的治理关注较少，目前大都处于起始阶段，学校现有的业务系统建设使用情况较为复杂，大部分业务系统内的数据完整度、准确度较差，数据治理面临诸多挑战，且无数据标准、或者业务系统自定义数据标准，维护不便。

技术实现思路

[0003]本专利技术提出一种面向教育领域数据集成及标准管理系统用于解决上述问题。
[0004]为实现上述目的，本专利技术采用以下技术方案：
[0005]一种面向教育领域数据集成及标准管理系统，包括数据标准管理单元、数据源接入模块、数据集成单元及任务调度与执行单元，所述数据标准管理单元用于数据标准管理，所述数据源接入模块用于接入数据源的管理，以及对该数据源进行元数据采集，所述数据集成单元用于ETL流程管理、ETL任务管理及ETL任务监控本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向教育领域数据集成及标准管理系统，其特征在于：包括数据标准管理单元、数据源接入模块、数据集成单元及任务调度与执行单元，所述数据标准管理单元用于数据标准管理，所述数据源接入模块用于接入数据源的管理，以及对该数据源进行元数据采集，所述数据集成单元用于ETL流程管理、ETL任务管理及ETL任务监控，所述任务调度与执行单元用于将任务的配置与调度执行分离。2.如权利要求1所述的一种面向教育领域数据集成及标准管理系统，其特征在于：所述数据标准管理单元包括文档上传模块、标准维护模块、标准生成模块及标准映射模块；所述文档上传模块用于上传数据的标准文档；所述标准维护模块用于查看或维护所述标准文档的内容；所述标准生成模块用于解析所述标准文档的内容，生成对应数据，并创建对应的数据库表，自动与其绑定数据标准，完成标准生成；所述标准映射模块用于手动建立数据标准与数据库表的关联。3.如权利要求2所述的一种面向教育领域数据集成及标准管理系统，其特征在于，所述标准生成的方法为：所述标准生成模块通过标准文档的解析器，自动解析标准文档内容包含的数据集和代码集，并递归解析的数据子集、数据类及数据子类结构，生成对应数据，存储到平台的数据库，通过数据子集可以查看生成的数据内容，基于生成的数据类和数据子类，再结合后处理阶段，同时支持直接创建对应的数据库表，自动与其绑定数据标准，完成标准生成。4.如权利要求1所述的一种面向教育领域数据集成及标准管理系统，其特征在于：所述元数据采集的方法为：接入选择好的数据源，配置该数据的属性信息，选择合适的采集适配器，然后配置采集任务的周期...

【专利技术属性】
技术研发人员：侯旭东，孙长明，
申请(专利权)人：厦门海彦信息科技有限公司，
类型：发明
国别省市：