基于元数据的脚本分析方法、系统、电子设备及存储介质技术方案

技术编号:46444529 阅读:4 留言:0更新日期:2025-09-19 20:45
本发明专利技术提供了一种基于元数据的脚本分析方法、系统、电子设备及存储介质,该方法为:对任意类型的待分析ETL脚本执行切片入库,以得到脚本信息表;获取第一元数据表和第二元数据表,以及获取脚本登记表;判断待分析ETL脚本是否同步且配置正确;若待分析ETL脚本同步且配置正确,通过第一元数据表、第二元数据表、脚本登记表和脚本信息表,对待分析ETL脚本进行表分析和字段分析,以得到表分析结果和字段分析结果。本方案对各类型的ETL脚本进行表级和字段级的分析,不再依赖于某种规则来全面分析ETL脚本,从而提高分析准确性。

【技术实现步骤摘要】

本专利技术涉及数据处理,具体涉及一种基于元数据的脚本分析方法、系统、电子设备及存储介质


技术介绍

1、目前通常采用正则表达式来分析etl(extract- transform- load)脚本,但是正则表达式主要针对同一类型写法的etl脚本进行分析,而etl脚本的类型复杂,分析复杂的etl脚本时,正则表达式会出现某些规则覆盖不到的情况,造成分析遗漏或错误的情况,分析准确性较差。


技术实现思路

1、有鉴于此,本专利技术实施例提供一种基于元数据的脚本分析方法、系统、电子设备及存储介质,以解决正则表达式分析脚本存在的分析准确性较差等问题。

2、为实现上述目的,本专利技术实施例提供如下技术方案:

3、本专利技术实施例第一方面公开一种基于元数据的脚本分析方法,所述方法包括:

4、对任意类型的待分析etl脚本执行切片入库,以得到脚本信息表;

5、获取第一元数据表和第二元数据表,以及获取脚本登记表,所述第一元数据表至少包括表所属数据库信息、表名称,所述第二元数据表至少包括数本文档来自技高网...

【技术保护点】

1.一种基于元数据的脚本分析方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,判断所述待分析ETL脚本是否同步且配置正确,包括:

3.根据权利要求1所述的方法,其特征在于,若所述待分析ETL脚本同步且配置正确,通过所述第一元数据表、所述第二元数据表、所述脚本登记表和所述脚本信息表,对所述待分析ETL脚本进行表分析和字段分析,以得到表分析结果和字段分析结果,包括:

4.根据权利要求1-3中任一所述的方法,其特征在于,对所述待分析ETL脚本进行表分析和字段分析之前,还包括:

5.一种基于元数据的脚本分析系统,其特征在于...

【技术特征摘要】

1.一种基于元数据的脚本分析方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,判断所述待分析etl脚本是否同步且配置正确,包括:

3.根据权利要求1所述的方法,其特征在于,若所述待分析etl脚本同步且配置正确,通过所述第一元数据表、所述第二元数据表、所述脚本登记表和所述脚本信息表,对所述待分析etl脚本进行表分析和字段分析,以得到表分析结果和字段分析结果,包括:

4.根据权利要求1-3中任一所述的方法,其特征在于,对所述待分析etl脚本进行表分析和字段分析之前,还包括:

5.一种基于元数据的脚本分析系统,其特征在于,所述系统包括:

6.根据权利要...

【专利技术属性】
技术研发人员:许鹏健卢波澜刘丙哲
申请(专利权)人:中国大地财产保险股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1