元数据管理系统技术方案

本发明专利技术提供了一种元数据管理系统，包括：数据概况模块用于数据资产库中的数据进行校准、分类，并生成每个类别对应的数据列表；向用户展示资产库信息；当接收到搜索引擎模块发送的搜索信息时查找各个目标数据，构建各个所述目标数据对应的血缘关系；数据指标模块用于对每个数据列表中的各个数据进行指标划分；数据反馈模块用于接收用户发送的数据修正消息，并将数据修正消息发送至对应的业务端；获得业务端的反馈结果后，由数据概况模块或数据指标模块对反馈结果对应的数据进行修正；搜索引擎模块用于接收用户发送的搜索信息实现对数据的搜索。应用本发明专利技术提供的系统，可以实现对元数据的管理，并通过对元数据的管理实现数据的溯源。源。源。

Metadata Management

【技术实现步骤摘要】
元数据管理系统


[0001]本专利技术涉及元数据管理
，特别是涉及一种元数据管理系统。

技术介绍

[0002]随着公司的业务产品线不断增多，底层数据记录越来越复杂，每个业务条线自己的数据自成体系，烟囱式的业务开发形式，也极易形成数据孤岛。公司级的数据仓库建设是该情况下的最优选择，其汇总层与展示层的数据，既可以作为BI分析的基础，更可以直接包装成数据接口。越来越多的业务数据与数据仓库数据，在数据分析、业务赋能过程中，如何更快速的检索数据，根据不同需求的业务口径选择数据，成为了数据管理的重点。元数据作为数据的数据，就是记录这些信息的核心。数据全生命周期的元数据管理与维护，是数据治理的根基，为保证公司数据平稳高效赋能奠定基础。
[0003]现有技术对数据进行管理过程中，容易导致元数据的缺失，而且无法实现数据的全生命周期溯源，导致后续在应用数据过程中，加大了数据的查找难度。

技术实现思路

[0004]有鉴于此，本专利技术提供一种元数据管理系统，通过该方法，可以实现对元数据的管理，并通过对元数据的管理实现数据的溯源。
[0005]一种元数据管理系统，其特征在于，包括：
[0006]数据概况模块、数据指标模块、数据反馈模块和搜索引擎模块；
[0007]所述数据概况模块，用于实时扫描数据仓库的元数据信息，并基于数据仓库中的元数据信息实时校准数据资产库中的数据；基于预设的第一分类规则，对所述数据资产库中的各个数据进行分类，获得所述数据资产库中每个类别对应的数据列表；当检测到用户登录时，向所述用户展示所述数据资产库的资产库信息，所述资产库信息包括各个所述数据列表；当接收到所述搜索引擎模块发送的搜索信息时，查找所述搜索信息对应的各个目标数据列表，并所述目标数据列表关联的各个目标数据，构建各个所述目标数据对应的血缘关系；
[0008]所述数据指标模块，用于基于预设的第二分类规则，对每个所述数据列表中的各个数据进行指标划分，获得每个所述数据列表下多个指标类别数据指标；
[0009]所述数据反馈模块，用于接收用户发送的数据修正消息，确定所述数据修正消息对应的反馈类别，所述反馈类型为数据类型或指标类型；将所述数据修正消息发送至所述反馈类型对应的业务端；当接收到所述业务端反馈的所述数据修正消息对应的反馈结果时，基于所述反馈类型调用所述数据概况模块或所述数据指标模块对所述反馈结果对应的结果数据进行分类；
[0010]所述搜索引擎模块，用于接收用户发送的搜索信息，并将所述搜索信息发送至所述数据概况模块，使得所述数据概况模块从所述数据资产库中的查询所述搜索信息对应的数据。
[0011]上述的元数据管理系统，可选的，所述数据概况模块，用于基于所述元数据信息，判断所述数据仓库是否存在新增的数据，以及判断所述数据仓库中是否存在更新的数据；当所述数据仓库存在新增的数据时，将所述新增的数据添加至预设的新增列表；当所述数据仓库存在更新的数据时，将所述更新的数据添加至预设的更新列表；将所述新增列表中新增的数据存储至所述数据资产库；基于所述更新列表中更新的数据，更新所述数据资产库中的数据。
[0012]上述的元数据管理系统，可选的，所述数据概况模块，用于确定用户的用户类型；当所述用户的用户类型为普通用户时，向所述用户展示所述数据资产库的各个所述数据列表及各个所述数据列表对应的数据详情；当所述用户的用户类型为管理用户时，向所述用户展示所述数据资产库的各个所述数据列表、各个所述数据列表对应的数据详情及所述数据资产库对应的数据管理模块。
[0013]上述的元数据管理系统，可选的，所述数据概况模块，用于获取所述搜索信息中包含的表编号；确定所述数据资产库中与所述表编号匹配的目标数据列表；基于所述表编号，查找与所述目标数据列表关联的各个目标数据。
[0014]上述的元数据管理系统，可选的，所述数据概况模块，用于基于与所述目标数据列表关联的各个目标数据之间的血缘关系，将与所述id匹配的各个数据进行关联，获得关联数据，向所述用户发送所述关联数据。
[0015]上述的元数据管理系统，可选的，所述数据概况模块，还用于：当接收到所述数据资产库中任意的数据列表对应的废弃指令时，取消展示所述废弃指令对应的数据列表。
[0016]上述的元数据管理系统，可选的，所述数据概况模块，还用于当接收到已废弃的数据列表对应的恢复指令时，恢复展示所述恢复指令对应的数据列表。
[0017]上述的元数据管理系统，可选的，所述数据反馈模块，用于获取所述数据修正消息包含的反馈标识；当所述反馈标识为第一反馈标识时，确定所述数据修正消息对应的反馈类型为数据类型；当所述反馈标识为第二反馈标识时，确定所述数据修正消息对应的反馈类型为指标类型。
[0018]上述的元数据管理系统，可选的，所述数据反馈模块，用于当所述数据修正消息对应的反馈类型为数据类型时，将所述反馈结果记录至预设的第一存储库，并调用所述数据概况模块按照所述第一分类规则对所述反馈结果进行分类；当所述数据修正消息对应的反馈类型为指标类型时，将所述反馈结果记录至预设的第二存储库，并调用所述数据指标模块按照所述第二分类规则对所述反馈结果进行分类。
[0019]上述的元数据管理系统，可选的，所述搜索引擎模块，用于获取所述搜索信息中包含的库名及数据类别，基于所述库名及所述数据类别，从所述数据资产库中的查询所述搜索信息对应的数据。
[0020]与现有技术相比，本专利技术包括以下优点：
[0021]本专利技术提供了一种元数据管理系统，包括：数据概况模块，用于实时扫描数据仓库的元数据信息，并基于数据仓库中的元数据信息实时校准数据资产库中的数据；基于预设的第一分类规则，对所述数据资产库中的各个数据进行分类，获得所述数据资产库中每个类别对应的数据列表；当检测到用户登录时，向所述用户展示所述数据资产库的资产库信息，所述资产库信息包括各个所述数据列表；当接收到所述搜索引擎模块发送的搜索信息
时，查找所述搜索信息对应的各个目标数据列表，并所述目标数据列表关联的各个目标数据，构建各个所述目标数据对应的血缘关系；数据指标模块，用于基于预设的第二分类规则，对每个所述数据列表中的各个数据进行指标划分，获得每个所述数据列表下多个指标类别数据指标；数据反馈模块，用于接收用户发送的数据修正消息，确定所述数据修正消息对应的反馈类别，所述反馈类型为数据类型或指标类型；将所述数据修正消息发送至所述反馈类型对应的业务端；当接收到所述业务端反馈的所述数据修正消息对应的反馈结果时，基于所述反馈类型调用所述数据概况模块或所述数据指标模块对所述反馈结果对应的结果数据进行分类；搜索引擎模块，用于接收用户发送的搜索信息，并将所述搜索信息发送至所述数据概况模块，使得所述数据概况模块从所述数据资产库中的查询所述搜索信息对应的数据。应用本专利技术提供的系统，可以实现对元数据的管理，并通过对元数据的管理实现数据的溯源。
附图说明
[0022]为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种元数据管理系统，其特征在于，包括：数据概况模块、数据指标模块、数据反馈模块和搜索引擎模块；所述数据概况模块，用于实时扫描数据仓库的元数据信息，并基于数据仓库中的元数据信息实时校准数据资产库中的数据；基于预设的第一分类规则，对所述数据资产库中的各个数据进行分类，获得所述数据资产库中每个类别对应的数据列表；当检测到用户登录时，基于所述用户的用户类型，向所述用户展示所述数据资产库的资产库信息，所述资产库信息包括各个所述数据列表；当接收到所述搜索引擎模块发送的搜索信息时，查找所述搜索信息对应的各个目标数据列表，并所述目标数据列表关联的各个目标数据，构建各个所述目标数据对应的血缘关系；所述数据指标模块，用于基于预设的第二分类规则，对每个所述数据列表中的各个数据进行指标划分，获得每个所述数据列表下多个指标类别数据指标；所述数据反馈模块，用于接收用户发送的数据修正消息，确定所述数据修正消息对应的反馈类别，所述反馈类型为数据类型或指标类型；将所述数据修正消息发送至所述反馈类型对应的业务端；当接收到所述业务端反馈的所述数据修正消息对应的反馈结果时，基于所述反馈类型调用所述数据概况模块或所述数据指标模块对所述反馈结果对应的结果数据进行分类；所述搜索引擎模块，用于接收用户发送的搜索信息，并将所述搜索信息发送至所述数据概况模块，使得所述数据概况模块从所述数据资产库中的查询所述搜索信息对应的数据。2.根据权利要求1所述的元数据管理系统，其特征在于，所述数据概况模块，用于基于所述元数据信息，判断所述数据仓库是否存在新增的数据，以及判断所述数据仓库中是否存在更新的数据；当所述数据仓库存在新增的数据时，将所述新增的数据添加至预设的新增列表；当所述数据仓库存在更新的数据时，将所述更新的数据添加至预设的更新列表；将所述新增列表中新增的数据存储至所述数据资产库；基于所述更新列表中更新的数据，更新所述数据资产库中的数据。3.根据权利要求1所述的元数据管理系统，其特征在于，所述数据概况模块，用于当所述用户的用户类型为普通用户时，向所述用户展示所述数据资产库的各个所述数据列表及各个所述数据列表...

【专利技术属性】
技术研发人员：杨馨，刘亚男，
申请(专利权)人：建信融通有限责任公司，
类型：发明
国别省市：