【技术实现步骤摘要】
本专利技术涉及数字化平台系统自动化测试，尤其是涉及一种基于蜕变测试的etl系统测试方法、装置、设备及介质。
技术介绍
1、数据仓库位于大数据系统的底层，用于汇总各个系统提供的数据，并根据需要进行etl(抽取、转换、加载)到目标中，目前测试人员进行etl系统测试的测试方法为，先构造最初的源端数据，执行etl程序后，查看结果数据是否正确。但目前大数据测试中，测试对象由多个任务调度组成的，数据量非常庞大，并且多个源表之间相互关联，无法得知每一张表或字段的转换都是正确的，只通过查看数据结果是否正确，不足以判断etl对象是否通过测试。
技术实现思路
1、有鉴于此，本专利技术的目的在于提供一种基于蜕变测试的etl系统测试方法、装置、设备及介质，可以显著提升etl系统测试可靠性和鲁棒性，优化了传统测试方式存在的testoracle问题。
2、第一方面，本专利技术实施例提供了一种基于蜕变测试的etl系统测试方法，包括：
3、获取待测试etl程序对应的原始数据和原始测试用例；
4、利用所述原始数据和所述原始测试用例，判断所述待测试etl程序是否通过etl测试；
5、如果是，则基于所述原始测试用例和蜕变关系构造蜕变测试用例；
6、利用所述原始测试用例、所述蜕变测试用例和所述蜕变关系，对所述待测试etl程序进行蜕变测试，得到所述待测试etl程序对应的目标测试结果。
7、在一种实施方式中，利用所述原始测试用例、所述蜕变测试用例和所述蜕
8、针对所述原始测试用例和所述蜕变测试用例，执行所述待测试etl程序，以得到所述原始测试用例对应的第一执行结果和所述蜕变测试用例对应的第二执行结果；
9、判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系；
10、如果是，则确定所述待测试etl程序对应的目标测试结果为通过蜕变测试；如果否，则确定所述待测试etl程序对应的目标测试结果为未通过蜕变测试。
11、在一种实施方式中，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，包括：
12、如果所述蜕变关系包括数据完整性关系，则执行如下步骤：
13、判断所述第一执行结果的数据量与所述第二执行结果的数据量是否一致；
14、判断所述第一执行结果中第一指定字段的最大值属性与所述第二执行结果中所述第一指定字段的最大值属性是否一致；其中，所述最大值属性包括最大值所属表名和/或最大值所处表中位置；
15、判断所述第一执行结果中第二指定字段的最小值属性与所述第二执行结果中所述第二指定字段的最小至属性是否一致；其中，所述最小值属性包括最小值所属表名和/或最小值所处表中位置；
16、判断所述第一执行结果的均值、总和与所述第二执行结果的均值、总和是否一致；
17、如果判断结果均为是，则确定所述第一执行结果与所述第二执行结果之间满足所述数据完整性关系。
18、在一种实施方式中，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，还包括：
19、如果所述蜕变关系包括转换正确性关系，则从所述第一执行结果中提取第一转换数据实际值，以及从所述第二执行结果中提取第二转换数据实际值；
20、判断所述第一转换数据实际值与所述第二转换数据实际值之间是否满足期望关系；
21、如果是，则确定所述第一执行结果与所述第二执行结果之间满足所述转换正确性关系。
22、在一种实施方式中，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，还包括：
23、如果所述蜕变关系包括增量不重复性关系，则将所述第一执行结果和所述第二执行结果分别添加至目标表中，得到第一目标表和第二目标表；
24、以运行标识和运行日期为检索条件，从所述第一目标表中提取第一目标数据，以及从所述第二目标表中提取第二目标数据；
25、判断所述第一目标数据和所述第二目标数据是否均为单条数据；
26、如果是，则确定所述第一执行结果与所述第二执行结果之间满足所述增量不重复性关系。
27、在一种实施方式中，利用所述原始数据和所述原始测试用例，判断所述待测试etl程序是否通过etl测试的步骤，包括：
28、针对所述原始数据和所述原始测试用例，执行所述待测试etl程序，得到etl执行结果；
29、如果每个所述原始测试用例对应的所述etl执行结果均为测试通过，则确定待测试etl程序通过etl测试。
30、在一种实施方式中，所述方法还包括：
31、如果存在任一所述原始测试用例对应的所述etl执行结果为测试未通过，则确定所述待测试etl程序对应的目标测试结果为未通过etl测试。
32、第二方面，本专利技术实施例还提供一种基于蜕变测试的etl系统测试装置，包括：
33、获取模块，用于获取待测试etl程序对应的原始数据和原始测试用例；
34、etl测试模块，用于利用所述原始数据和所述原始测试用例，判断所述待测试etl程序是否通过etl测试；
35、用例构造模块，用于在所述etl测试模块的判断结果为是时，则基于所述原始测试用例和蜕变关系构造蜕变测试用例；
36、蜕变测试模块，用于利用所述原始测试用例、所述蜕变测试用例和所述蜕变关系，对所述待测试etl程序进行蜕变测试，得到所述待测试etl程序对应的目标测试结果。
37、第三方面，本专利技术实施例还提供一种电子设备，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的计算机可执行指令，所述处理器执行所述计算机可执行指令以实现第一方面提供的任一项所述的方法。
38、第四方面，本专利技术实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令在被处理器调用和执行时，计算机可执行指令促使处理器实现第一方面提供的任一项所述的方法。
39、本专利技术实施例提供的一种基于蜕变测试的etl系统测试方法、装置、设备及介质，首先获取待测试etl程序对应的原始数据和原始测试用例；然后利用原始数据和原始测试用例，判断待测试etl程序是否通过etl测试；当判断结果为是时，则基于原始测试用例和蜕变关系构造蜕变测试用例；最后利用原始测试用例、蜕变测试用例和蜕变关系，对待测试etl程序进行蜕变测试，得到待测试etl程序对应的目标测试结果。上述方法首先对待测试etl程序进行etl测试，并在其通过etl测试的情况下利用原始测试用例和构造的蜕变测试用例对待测试etl程序进行蜕变测试，以得到最终的目标测试结果，本专利技术实施例是在无法一一对比etl转换的表和字段是否正确时，从测试人员的角度验证了输出结果是否满足由etl属性所本文档来自技高网...
【技术保护点】
1.一种基于蜕变测试的ETL系统测试方法，其特征在于，包括：
2.根据权利要求1所述的基于蜕变测试的ETL系统测试方法，其特征在于，利用所述原始测试用例、所述蜕变测试用例和所述蜕变关系，对所述待测试ETL程序进行蜕变测试，得到所述待测试ETL程序对应的目标测试结果的步骤，包括：
3.根据权利要求2所述的基于蜕变测试的ETL系统测试方法，其特征在于，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，包括：
4.根据权利要求2所述的基于蜕变测试的ETL系统测试方法，其特征在于，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，还包括：
5.根据权利要求2所述的基于蜕变测试的ETL系统测试方法，其特征在于，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，还包括：
6.根据权利要求1所述的基于蜕变测试的ETL系统测试方法，其特征在于，利用所述原始数据和所述原始测试用例，判断所述待测试ETL程序是否通过ETL测试的步骤，包括：
7.根据权利要求6所述的基于蜕
8.一种基于蜕变测试的ETL系统测试装置，其特征在于，包括：
9.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的计算机可执行指令，所述处理器执行所述计算机可执行指令以实现权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令在被处理器调用和执行时，计算机可执行指令促使处理器实现权利要求1至7任一项所述的方法。
...【技术特征摘要】
1.一种基于蜕变测试的etl系统测试方法，其特征在于，包括：
2.根据权利要求1所述的基于蜕变测试的etl系统测试方法，其特征在于，利用所述原始测试用例、所述蜕变测试用例和所述蜕变关系，对所述待测试etl程序进行蜕变测试，得到所述待测试etl程序对应的目标测试结果的步骤，包括：
3.根据权利要求2所述的基于蜕变测试的etl系统测试方法，其特征在于，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，包括：
4.根据权利要求2所述的基于蜕变测试的etl系统测试方法，其特征在于，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步骤，还包括：
5.根据权利要求2所述的基于蜕变测试的etl系统测试方法，其特征在于，判断所述第一执行结果与所述第二执行结果之间是否满足所述蜕变关系的步...
【专利技术属性】
技术研发人员：南玺，
申请(专利权)人：中电信数字城市科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。