数据表清理方法、装置、设备、存储介质及程序产品制造方法及图纸

本申请提供一种数据表清理方法、装置、设备、存储介质及程序产品，涉及金融领域。该方法包括：对各个目标清理要求进行分词处理，获取各个分词处理结果，目标清理要求为目标复杂清理数据表对应的清理要求；分词处理结果中包含清理字段，针对每一清理字段，确定包含清理字段的第一数据表，从第一数据表中筛选第二数据表；第二数据表为关于清理字段的原始数据表，根据第二数据表中的清理字段和分词处理结果生成清理SQL语句，根据清理SQL语句对目标复杂清理数据表进行清理，通过对目标清理要求进行分词处理并确定包含清理字段的原始数据表，从而生成清理SQL语句，实现对复杂清理数据表的自动化清理，可以提高清理效率，减少人力资源的消耗。

【技术实现步骤摘要】

本申请涉及大数据领域，尤其涉及一种数据表清理方法、装置、设备、存储介质及程序产品。

技术介绍

1、随着监管部门相关数据安全、信息保护规范要求的出台，明确对于某些满足清理条件的数据必须及时进行清理，若数据未及时清理，则存在被监管部门处罚的风险。需要清理的数据中就包含复杂清理数据表。

2、复杂清理数据表是指不能根据单表的状态标志来判断是否具备清理条件，需要判断多个字段，关联多个表才能进行数据清理的数据表。在实际操作中，对应复杂清理数据表，因为无法定位需要关联哪些数据表进行清理，为了避免数据误删除往往对数据进行冗余存储，或者，依靠开发人员的经验判断需要关联的数据表，该需要关联的数据表中存在清理需要的字段信息，再通过上下游开发人员之间的沟通明确复杂清理数据表的数据清理逻辑，从而执行数据清理。

3、上述对复杂清理数据表的清理需要依靠开发人员的经验，通过上下游开发人员沟通明确清理逻辑，则会存在数据清理效率较低，人力资源投入较多的问题。

技术实现思路

1、本专利技术提供一种数据表清理方法、装置、设备本文档来自技高网...

【技术保护点】

1.一种数据表清理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，确定包含所述清理字段的第一数据表，包括：

3.根据权利要求2所述的方法，其特征在于，所述元数据管理系统中还记录有各个数据表分别对应的加工SQL语句；所述加工SQL语句用于表示所述数据表的加工过程；从所述第一数据表中筛选第二数据表，包括：

4.根据权利要求1所述的方法，其特征在于，根据所述第二数据表中的所述清理字段和所述分词处理结果生成清理SQL语句，包括：

5.根据权利要求4所述的方法，其特征在于，所述分词处理结果还包括：判断逻辑、清理条件；根据所述关联字...

【技术特征摘要】

1.一种数据表清理方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，确定包含所述清理字段的第一数据表，包括：

3.根据权利要求2所述的方法，其特征在于，所述元数据管理系统中还记录有各个数据表分别对应的加工sql语句；所述加工sql语句用于表示所述数据表的加工过程；从所述第一数据表中筛选第二数据表，包括：

4.根据权利要求1所述的方法，其特征在于，根据所述第二数据表中的所述清理字段和所述分词处理结果生成清理sql语句，包括：

5.根据权利要求4所述的方法，其特征在于，所述分词处理结果还包括：判断逻辑、清理条件；根据所述关联字段...

【专利技术属性】
技术研发人员：赵乐，张海军，李甲长，
申请(专利权)人：中国工商银行股份有限公司，
类型：发明
国别省市：