数据血缘关系建立方法、装置、计算机设备及存储介质制造方法及图纸

本申请实施例属于大数据领域，涉及一种数据血缘关系建立方法，包括获取当前数据连接系统的系统类别，根据所述系统类别选取预设处理工具；在所述数据连接系统中包括多个目标数据库时，基于所述预设处理工具获取所述数据连接系统中源数据表和目标数据表；根据所述源数据表和所述目标数据表建立所述数据连接系统的血缘关系映射表，并存储所述血缘关系映射表至预设数据库中。本申请还提供一种数据血缘关系建立装置、计算机设备及存储介质。此外，本申请还涉及区块链技术，血缘关系映射表可存储于区块链中。本申请实现了对数据血缘关系的统一高效管理。

【技术实现步骤摘要】
数据血缘关系建立方法、装置、计算机设备及存储介质
本申请涉及大数据
，尤其涉及一种数据血缘关系建立方法、装置、计算机设备及存储介质。
技术介绍
随着信息技术的高速发展和各个领域业务规模的不断增大，累积的数据越来越多，大数据被应用地越来越广泛，高效地数据处理已成为当前迫切的需求。高效地数据处理往往离不开对数据血缘关系的高效管理和维护。当前在数据处理过程中，对数据和数据之间的血缘关系的管理，基本上都依赖于开发人员手工文档维护。然而，在人工维护过程中，由于数据处理工作量大，往往会存在数据处理效率低下和处理不及时的问题，还容易跟真实生产系统产生数据误差；而且，当数据之间的关系越来越复杂时，亦容易产生因关联影响评估不到位的生产事故。
技术实现思路
本申请实施例的目的在于提出一种数据血缘关系建立方法、装置、计算机设备及存储介质，以解决当前无法对数据血缘关系实现高效地自动化管理的技术问题。为了解决上述技术问题，本申请实施例提供一种数据血缘关系建立方法，采用了如下所述的技术方案：获取当前数据连接系统的系统类别，本文档来自技高网...

【技术保护点】
1.一种数据血缘关系建立方法，其特征在于，包括下述步骤：/n获取数据连接系统的系统类别，根据所述系统类别选取预设处理工具；/n在所述数据连接系统中包括多个目标数据库时，基于所述预设处理工具获取所述数据连接系统中源数据表和目标数据表；/n根据所述源数据表和所述目标数据表建立所述数据连接系统的血缘关系映射表，并存储所述血缘关系映射表至预设数据库中。/n

【技术特征摘要】
1.一种数据血缘关系建立方法，其特征在于，包括下述步骤：
获取数据连接系统的系统类别，根据所述系统类别选取预设处理工具；
在所述数据连接系统中包括多个目标数据库时，基于所述预设处理工具获取所述数据连接系统中源数据表和目标数据表；
根据所述源数据表和所述目标数据表建立所述数据连接系统的血缘关系映射表，并存储所述血缘关系映射表至预设数据库中。


2.根据权利要求1所述的数据血缘关系建立方法，其特征在于，所述系统类别包括标准类别、多关系类别和实时推送类别，所述根据所述系统类别选取预设处理工具包括：
在所述系统类别为所述标准类别时，确定所述预设处理工具为第一类处理工具；
在所述系统类别为所述多关系类别时，确定所述预设处理工具为第二类处理工具；
在所述系统类别为所述实时推送类别时，确定所述预设处理工具为第三类处理工具。


3.根据权利要求1所述的数据血缘关系建立方法，其特征在于，所述基于所述预设处理工具获取所述数据连接系统中源数据表和目标数据表包括：
在所述预设处理工具为第一类处理工具时，获取第一解析脚本，根据所述第一解析脚本读取所述数据连接系统中源数据表和目标数据表；
在所述预设处理工具为第二类处理工具时，获取第二解析脚本，根据所述第二解析脚本读取数据链路配置文件，基于所述数据链路配置文件获取所述数据连接系统的源数据表和目标数据表；
在所述预设处理工具为第三类处理工具时，获取所述数据连接系统中各个所述目标数据库的身份信息，根据所述身份信息确定所述数据连接系统的源数据表和目标数据表。


4.根据权利要求3所述的数据血缘关系建立方法，其特征在于，所述获取所述数据连接系统中各个所述目标数据库的身份信息包括：
在所述预设处理工具为所述第三类处理工具时，获取识别程序；
根据所述识别程序识别所述数据连接系统中各个所述目标数据库的身份信息，其中，所述身份信息包括供数者和消费者。


5.根据权利要求4所述的数据血缘关系建立方法，其特征在于，所述根据所述识别程序识别所述数据连接系统...

【专利技术属性】
技术研发人员：张焱，
申请(专利权)人：平安科技深圳有限公司，
类型：发明
国别省市：广东;44