一种元数据管理方法、设备及存储介质技术

本发明专利技术公开了一种元数据管理方法、设备及存储介质。所述元数据管理方法包括：配置数据源并通过quartz框架设置定时任务；利用数据库连接技术对所述数据源系统进行所述元数据采集；对所述采集后的元数据进行转换和清洗；将所述清洗后的元数据与基础元数据进行比对，并根据比对结果进行元数据分析。所述元数据管理方法、设备及存储介质具有数据库兼容性高的优点，可支持Oracl e、MySQL、SQLServe l、达梦等关系型数据库元数据采集，且采集速度快，通过多线程技术可支持多系统同时采集，另外元数据采集与监控互相结合，能够更加有效的管理元数据。

A metadata management method, device and storage medium

【技术实现步骤摘要】
一种元数据管理方法、设备及存储介质
本专利技术涉及一种元数据领域，尤其涉及一种元数据管理方法、设备及存储介质。
技术介绍
现阶段的元数据管理工具，大多是利用数据库连接技术直接连接数据库，通过查询数据库系统表的数据获取技术元数据。目前市面上的产品只适用于元数据变化相对稳定的场景，且在元数据采集期间少有元数据发生变更。如采集一个上万张库表、百万个字段的系统，且库表和字段是不断在发生变更的，那么目前市面上的产品对这种场景十分不友好，采集得到的元数据信息是不准确的。基于电网系统元数据是处于一个不断变化的场景，因此市面上产品是不能准确地、实时地反映出元数据信息。
技术实现思路
有鉴于此，本专利技术实施例提供的一种元数据管理方法、设备及存储介质解决了现有技术中元数据采集信息不准确的问题。本专利技术实施例提供的一种元数据管理方法、设备及存储介质具有数据库兼容性高的优点，可支持Oracle、MySQL、SQLServel、达梦等关系型数据库元数据采集，且采集速度快，通过多线程技术可支持多系统同时采集，另外元数据采集与监控互相结合，能本文档来自技高网...

【技术保护点】
1.一种元数据管理方法，其特征在于，包括：/n配置数据源并通过quartz框架设置定时任务；/n利用数据库连接技术对所述数据源系统进行所述元数据采集；/n对所述采集后的元数据进行转换和清洗；/n将所述清洗后的元数据与基础元数据进行比对，并根据比对结果进行元数据分析。/n

【技术特征摘要】
1.一种元数据管理方法，其特征在于，包括：
配置数据源并通过quartz框架设置定时任务；
利用数据库连接技术对所述数据源系统进行所述元数据采集；
对所述采集后的元数据进行转换和清洗；
将所述清洗后的元数据与基础元数据进行比对，并根据比对结果进行元数据分析。


2.根据权利要求1所述的一种元数据管理方法，其特征在于，所述配置数据源并通过quartz框架设置定时任务，具体包括：
配置业务系统数据库信息；
根据所述业务系统数据库信息在quartz框架下设置定时采集所述元数据的任务。


3.根据权利要求1所述的一种元数据管理方法，其特征在于，所述利用数据库连接技术对所述数据源系统进行所述元数据采集，具体包括：
连接所述数据源系统中的适配数据源类型；
根据所述适配数据源类型采集库表结构信息与字段结构信息，并得到一次性全量采集库表信息，并根据所述库表信息循环采集字段信息。


4.根据权利要求3所述的一种元数据管理方法，其特征在于，所述对所述采集后的元数据进行转换和清洗，具体包括：
如果在循环采集字段信息期间，所述库表信息发生了变更，则判断是否存在字段信息；
如果不存在字段信息，则删除所述库表信息；
如果存在字段信息，则保留库表信息并且采集所述字段信息。


5.根据权利要求1所述的一种元数据管理方法，其特征在于，所述将所述清洗后的元数据与基础元数据进行比对，并根据比对结果进行元...

【专利技术属性】
技术研发人员：甘杉，陈彬，余芸，奚建飞，马赟，徐欢，符飞虎，李远宁，
申请(专利权)人：南方电网数字电网研究院有限公司，
类型：发明
国别省市：广东;44