一种数据质量检测方法和装置制造方法及图纸

技术编号:17667624 阅读:44 留言:0更新日期:2018-04-11 05:56
本发明专利技术提供了一种数据质量检测方法和装置,其中,该方法包括:预先设置至少两种数据标准,还包括:获取待检测数据表;在所述至少两种数据标准中确定至少两种目标数据标准;针对每一种所述目标数据标准,均执行:利用当前目标数据标准对所述待检测数据表进行数据质量检测;根据各个所述目标数据标准对应的检测结果,生成至少一个数据检测报告。本发明专利技术提供的方案能够对数据进行多个维度的检测。

A method and device for data quality detection

【技术实现步骤摘要】
一种数据质量检测方法和装置
本专利技术涉及计算机
,特别涉及一种数据质量检测方法和装置。
技术介绍
在企业运营过程中,由于多地区、多产品、多业务、多系统的环境,导致数据存在诸多质量问题,主要包括:数据不一致、不完整、不统一等问题,由此导致管理者、业务人员和信息使用者的误解,导致数据利用出现错误,企业决策出现偏差。同时低劣数据质量往往造成开发出来的系统与用户预期大相径庭,并且导致运行维护成本过高,工作量过大,系统难以扩展。综上所述,数据质量的检测对于提高数据质量的至关重要的。现有技术中,一般通过单一的规则对数据进行检测,例如,利用预先设置的格式规则检测目标数据的格式。但是,现有的方法只能对数据进行格式等单一维度的检测。
技术实现思路
本专利技术实施例提供了一种数据质量检测方法和装置,能够对数据进行多个维度的检测。第一方面,本专利技术实施例提供了一种数据质量检测方法,预先设置至少两种数据标准,还包括:获取待检测数据表;在所述至少两种数据标准中确定至少两种目标数据标准;针对每一种所述目标数据标准,均执行:利用当前目标数据标准对所述待检测数据表进行数据质量检测;根据各个所述目标数据标准对应本文档来自技高网...
一种数据质量检测方法和装置

【技术保护点】
一种数据质量检测方法,其特征在于,预先设置至少两种数据标准,还包括:获取待检测数据表;在所述至少两种数据标准中确定至少两种目标数据标准;针对每一种所述目标数据标准,均执行:利用当前目标数据标准对所述待检测数据表进行数据质量检测;根据各个所述目标数据标准对应的检测结果,生成至少一个数据检测报告。

【技术特征摘要】
1.一种数据质量检测方法,其特征在于,预先设置至少两种数据标准,还包括:获取待检测数据表;在所述至少两种数据标准中确定至少两种目标数据标准;针对每一种所述目标数据标准,均执行:利用当前目标数据标准对所述待检测数据表进行数据质量检测;根据各个所述目标数据标准对应的检测结果,生成至少一个数据检测报告。2.根据权利要求1所述的数据质量检测方法,其特征在于,所述数据标准,包括:字段标准、数据元标准、数据表标准、约束规则、数据字典、敏感字段、黑名单和白名单中任意一种或多种的组合。3.根据权利要求1所述的数据质量检测方法,其特征在于,所述数据检测报告分为完整性报告、规范性报告、一致性报告、准确性报告、唯一性报告、关联性报告、安全性报告。4.根据权利要求1-3中任一所述的数据质量检测方法,其特征在于,所述当前目标数据标准为约束规则;所述约束规则包括:等于规则、截取自规则和合并自规则;所述利用当前目标数据标准对所述待检测数据表进行数据质量检测,包括:利用所述等于规则判断所述待检测数据表中的目标字段是否与预先设置的第一标准字段相同,利用所述截取自规则判断所述待检测数据表中的目标字段是否截取自所述第一标准字段,利用所述合并自规则判断所述待检测数据表中的目标字段是否为所述第一标准字段和预先设置的第二标准字段的组合。5.一种数据质量检测装置,其特征在于,包括:设置单元,用于设置至少两种数据标准;确定单元,用于获取待检测数据表,在所述设置单元设置的所述至少两种数据标准中确定至少两种目标数据标准;检测单元,用于针对所述确定单元确...

【专利技术属性】
技术研发人员:王洪添黄河潮
申请(专利权)人:山东浪潮云服务信息科技有限公司
类型:发明
国别省市:山东,37

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1