一种轻便检查数据应用指标有效性的方法、装置及应用制造方法及图纸

本申请提出了一种轻便检查数据应用指标有效性的方法、装置及应用，设计针对待稽核指标的指标配置表，通过python脚本连接数据库并将指标配置表内的字段赋值到python脚本内，利用python运算每个待稽核指标的结果值并生成结果表，基于结果表内的差异类型对待稽核指标的质量进行检查，实现了轻便检查待稽核指标质量的效果，同时可在数据运行过程中就进行数据检查，提高了数据质量检查的实效性。提高了数据质量检查的实效性。提高了数据质量检查的实效性。

【技术实现步骤摘要】
一种轻便检查数据应用指标有效性的方法、装置及应用


[0001]本申请涉及数据处理领域，特别是涉及一种轻便检查数据应用指标有效性的方法、装置及应用。

技术介绍

[0002]数字政府建设成效显著。一体化政务服务和监管效能大幅度提升，“一网通办”、“最多跑一次”、“一网统管”、“一网协同”等服务管理新模式广泛普及，数字营商环境持续优化，在线政务服务水平跃居全球领先行列，这其中离不开各地大数据局的数仓建设、数据治理。
[0003]通过对数据的整合、治理为数字政府、管理城市提供有力的数据底座支撑，通过集中化的智能提供了对日常城市运营的洞察。随着数字化改革的推进，智慧城市智能运行中心成为常见的数据应用展现，目前的展现侧大部分都没有做展现前的数据质量检查，一般的做法仅是在数据采集同步时和数据模型开发时对数据量、数据波动进行检查。这样只能保证单个数据模型的质量，并不能对具体的数据应用指标做有效性检查，从而无法保障数据应用指标的正确性，无法做到早发现，早处理，大部分情况都只能在数据应用展现后发现了异常再来进行人工干预处理。
[0004]现有的智慧本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种轻便检查数据应用指标有效性的方法，其特征在于，包括以下步骤：基于待稽核指标填写存放在数据库中的指标配置表，其中所述指标配置表内至少配置所述待稽核指标的识别信息、计算逻辑、周期、指标状态以及差异类型；利用python脚本连接所述数据库，所述python脚本上引入时间模块；读取所述指标配置表，以对所述python脚本内对应的字段进行赋值；运行每个待稽核指标的所述当前值计算逻辑，并利用所述时间模块的当前时间替换所述当前值计算逻辑内的时间变量，得到每个待稽核指标的结果值；汇总所有待稽核指标的结果值得到结果表，依据所述结果表核查每一待稽核指标的质量。2.根据权利要求1所述的轻便检查数据应用指标有效性的方法，其特征在于，在“基于待稽核指标填写存放在数据库中的指标配置表”步骤中，获取所述待稽核指标，并基于所述待稽核指标的数据合理性确定所述待稽核指标的核查类型，基于所述核查类型填写存放在数据库中的指标配置表。3.根据权利要求1所述的轻便检查数据应用指标有效性的方法，其特征在于，所述待稽核指标的识别信息用于唯一地标识对应的待稽核指标，所述计算逻辑至少包括当前值计算逻辑，所述差异类型记录所述待稽核指标的核查类型。4.根据权利要求1所述的轻便检查数据应用指标有效性的方法，其特征在于，在“读取所述指标配置表，以对所述python脚本内对应的字段进行赋值”步骤中，所述python脚本内写有对应所述指标配置表的字段，将读取到的所述指标配置表内的配置信息作为值赋予对应的字段。5.根据权利要求1所述的轻便检查数据应用指标有效性的方法，其特征在于，在“汇总所有待稽核指标的结果值得到结果表”步骤中，所述结果表内至少配置所述待稽核指标的识别信息、结果值、数据日期以及差异类型。6.根据权利要...

【专利技术属性】
技术研发人员：郁强，吴晶晶，
申请(专利权)人：城云科技中国有限公司，
类型：发明
国别省市：