一种元数据管理方法、系统、设备及计算机可读存储介质技术方案

本发明专利技术实施例公开一种元数据管理方法、系统、设备及计算机可读存储介质，该方法包括：获取第一源数据；根据第一源数据生成第一基础维度表，第一基础维度表包括第一技术元数据、第一业务元数据和第一操作元数据；建立第一基础维度表的索引与第一基础维度表之间的第一对应关系；建立第一技术元数据、第一业务元数据和第一操作元数据之间的第二对应关系；将第一基础维度表和第一源数据存储至关系型数据库；将第一对应关系和第一源数据存储至ElasticSearch数据库；将第二对应关系和第一源数据存储至Neo4j图库。本发明专利技术实施例，可以提高元数据管理效率。高元数据管理效率。高元数据管理效率。

【技术实现步骤摘要】
一种元数据管理方法、系统、设备及计算机可读存储介质


[0001]本专利技术实施例涉及数据管理
，尤其涉及一种元数据管理方法、系统、设备及计算机可读存储介质。

技术介绍

[0002]元数据(metadata)，又称中介数据、中继数据，为描述数据的数据(data about data)。元数据算是一种电子式目录，为了达到编制目录的目的，必须在描述并收藏数据的内容或特色，进而达成协助数据检索的目的。因此，如何管理元数据非常重要。
[0003]目前，一种常见的元数据管理方法为：基于行业的分类对源数据进行抽象，得到行业的元数据。上述方法中，在对源数据进行抽象过程中，需要采集源数据中的大量数据，降低了数据处理效率，以致降低了元数据管理效率。

技术实现思路

[0004]本专利技术实施例公开了一种元数据管理方法、系统、设备及计算机可读存储介质，用于提高元数据管理效率。
[0005]第一方面公开一种元数据管理方法，包括：
[0006]获取第一源数据；
[0007]根据所述第一源数据生成第一基础维度表，所述第一基础维度表包括第一技术元数据、第一业务元数据和第一操作元数据；
[0008]建立所述第一基础维度表的索引与所述第一基础维度表之间的第一对应关系；
[0009]建立所述第一技术元数据、所述第一业务元数据和所述第一操作元数据之间的第二对应关系；
[0010]将所述第一基础维度表和所述第一源数据存储至关系型数据库；
[0011]将所述第一对应关系和所述第一源数据存储至ElasticSearch数据库；
[0012]将所述第二对应关系和所述第一源数据存储至Neo4j图库。
[0013]作为一种可能的实施方式，所述第一技术元数据包括第一属性技术元数据、第一空间技术元数据或第一服务技术元数据，所述建立所述第一技术元数据、所述第一业务元数据和所述第一操作元数据之间的第二对应关系包括：
[0014]建立所述第一属性技术元数据、所述第一空间技术元数据或所述第一服务技术元数据，所述第一业务元数据以及所述第一操作元数据之间的第二对应关系。
[0015]作为一种可能的实施方式，所述方法还包括：
[0016]将所述第一对应关系的格式和所述第一源数据的格式转换为第一格式；
[0017]所述将所述第一对应关系和所述第一源数据存储至ElasticSearch数据库包括：
[0018]将转换格式后的第一对应关系和第一源数据存储至ElasticSearch数据库。
[0019]作为一种可能的实施方式，所述方法还包括：
[0020]将所述第二对应关系的格式转换为所述第一格式；
[0021]所述将所述第二对应关系和所述第一源数据存储至Neo4j图库包括：
[0022]将转换格式后的第二对应关系和第一源数据存储至Neo4j图库。
[0023]作为一种可能的实施方式，所述第一格式为JS对象简谱(javascript object notation，JSON)格式。
[0024]作为一种可能的实施方式，在所述第一技术元数据包括第一属性技术元数据或第一空间技术元数据的情况下，所述第一属性技术元数据或所述第一空间技术元数据包括第一字段技术元数据，所述方法还包括：
[0025]建立所述第一字段技术元数据与所述第一属性技术元数据或所述第一空间技术元数据之间的第三对应关系；
[0026]所述将所述第二对应关系和所述第一源数据存储至Neo4j图库包括：
[0027]将所述第二对应关系、所述第三对应关系和所述第一源数据存储至Neo4j图库。
[0028]第二方面公开一种元数据管理系统，包括：
[0029]Web应用，用于获取第一源数据；
[0030]所述Web应用，还用于根据所述第一源数据生成第一基础维度表，所述第一基础维度表包括第一技术元数据、第一业务元数据和第一操作元数据；
[0031]所述Web应用，还用于建立所述第一基础维度表的索引与所述第一基础维度表之间的第一对应关系；
[0032]所述Web应用，还用于建立所述第一技术元数据、所述第一业务元数据和所述第一操作元数据之间的第二对应关系，
[0033]关系型数据库，用于存储所述第一基础维度表和所述第一源数据；
[0034]ElasticSearch数据库，用于存储所述第一对应关系和所述第一源数据；
[0035]Neo4j图库，用于存储所述第二对应关系和所述第一源数据。
[0036]作为一种可能的实施方式，所述第一技术元数据包括第一属性技术元数据、第一空间技术元数据或第一服务技术元数据；
[0037]所述Web应用建立所述第一技术元数据、所述第一业务元数据和所述第一操作元数据之间的第二对应关系包括：
[0038]建立所述第一属性技术元数据、所述第一空间技术元数据或所述第一服务技术元数据，所述第一业务元数据以及所述第一操作元数据之间的第二对应关系。
[0039]作为一种可能的实施方式，所述Web应用，还用于将所述第一对应关系的格式和所述第一源数据的格式转换为第一格式；
[0040]所述ElasticSearch数据库存储所述第一对应关系和所述第一源数据包括：
[0041]所述ElasticSearch数据库存储转换格式后的第一对应关系和第一源数据。
[0042]作为一种可能的实施方式，所述Web应用，还用于将所述第二对应关系的格式转换为所述第一格式；
[0043]所述Neo4j图库存储所述第二对应关系和所述第一源数据包括：
[0044]所述Neo4j图库存储转换格式后的第二对应关系和第一源数据。
[0045]作为一种可能的实施方式，所述第一格式为JSON格式。
[0046]作为一种可能的实施方式，在所述第一技术元数据包括第一属性技术元数据或第一空间技术元数据的情况下，所述第一属性技术元数据或所述第一空间技术元数据包括第
一字段技术元数据；
[0047]所述Web应用，还用于建立所述第一字段技术元数据与所述第一属性技术元数据或所述第一空间技术元数据之间的第三对应关系；
[0048]所述Neo4j图库存储所述第二对应关系和所述第一源数据包括：
[0049]所述Neo4j图库存储所述第二对应关系、所述第三对应关系和所述第一源数据。
[0050]第三方面公开一种元数据管理设备，包括处理器、存储器和收发器，该收发器用于与其他设备之间进行通信，该处理器调用存储器中存储的计算机程序实现第一方面公开的方法。
[0051]第四方面公开一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序或计算机指令，当该计算机程序或计算机指令被处理器运行时，实现如第一方面公开的方法。
[0052]本专利技术实施例中，获取第一源数据，根据第一源数据生成包括第一技术元数据、第一业务元数据和第一操本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种元数据管理方法，其特征在于，包括：获取第一源数据；根据所述第一源数据生成第一基础维度表，所述第一基础维度表包括第一技术元数据、第一业务元数据和第一操作元数据；建立所述第一基础维度表的索引与所述第一基础维度表之间的第一对应关系；建立所述第一技术元数据、所述第一业务元数据和所述第一操作元数据之间的第二对应关系；将所述第一基础维度表和所述第一源数据存储至关系型数据库；将所述第一对应关系和所述第一源数据存储至ElasticSearch数据库；将所述第二对应关系和所述第一源数据存储至Neo4j图库。2.根据权利要求1所述的方法，其特征在于，所述第一技术元数据包括第一属性技术元数据、第一空间技术元数据或第一服务技术元数据，所述建立所述第一技术元数据、所述第一业务元数据和所述第一操作元数据之间的第二对应关系包括：建立所述第一属性技术元数据、所述第一空间技术元数据或所述第一服务技术元数据，所述第一业务元数据以及所述第一操作元数据之间的第二对应关系。3.根据权利要求1所述的方法，其特征在于，所述方法还包括：将所述第一对应关系的格式和所述第一源数据的格式转换为第一格式；所述将所述第一对应关系和所述第一源数据存储至ElasticSearch数据库包括：将转换格式后的第一对应关系和第一源数据存储至ElasticSearch数据库。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：将所述第二对应关系的格式转换为所述第一格式；所述将所述第二对应关系和所述第一源数据存储至Neo4j图库包括：将转换格式后的第二对应关系和第一源数据存储至Neo4j图库。5.根据权利要求4所述的方法，其特征在于，所述第一格式为JS对象简谱JSON格式。6.根据权利要求2所述的方法，其特征在于，在所述第一技术元数据包括第一属性技术元数据或第一空间技术元数据的情况下，所述第一属性技术元数据或所述第一空间技术元数据包括第一字段技术元数据，所述方法还...

【专利技术属性】
技术研发人员：凌捷，王向宇，谢慧波，伍思坤，杨楠，邓赟，杨志军，
申请(专利权)人：广东南方数码科技股份有限公司，
类型：发明
国别省市：