The invention provides a data quality detection method and device, which relates to the technical field of data analysis. The data quality detection method includes: by acquiring data information and detection algorithm, data information is pre-detected data information, detection algorithm is used to detect the quality of data information; and according to detection algorithm, using distributed computing to detect data information and obtain detection results; finally, according to detection results and pre-set detection conditions, data information is determined. Quality. By means of distributed computing, data information can be checked to improve the speed of data quality analysis, thus improving the efficiency of data quality analysis.
【技术实现步骤摘要】
数据质量检测方法及装置
本专利技术涉及数据分析
,具体而言,涉及一种数据质量检测方法及装置。
技术介绍
随着大数据时代的到来,信息数据呈爆炸性增长,各个行业或者企业在运营的过程中产生的有价值的数据越来越多,因此,对于数据质量的提升也变得越来越重要。相关技术中,具有数据质量检测功能的软件,可以获取需要进行质量检测的数据信息,并依次对该数据信息的质量进行分析,最终可以向用户展示数据信息的质量分析的结果。但是,相关技术中,依次对该数据信息的质量进行分析时,会出现分析速度较慢,导致分析效率过低的问题。
技术实现思路
本专利技术的目的在于,针对上述现有技术中的不足,提供一种数据质量检测方法及装置,以解决相关技术中,依次对该数据信息的质量进行分析时,会出现分析速度较慢,导致分析效率过低的问题。为实现上述目的,本专利技术实施例采用的技术方案如下:第一方面,本专利技术实施例提供了一种数据质量检测方法,包括:获取数据信息和检测算法,所述数据信息为预检测的数据信息,所述检测算法用于检测所述数据信息的质量;根据所述检测算法,采用分布式计算的方式对所述数据信息进行检测,获取检测结果;根 ...
【技术保护点】
1.一种数据质量检测方法,其特征在于,包括:获取数据信息和检测算法,所述数据信息为预检测的数据信息,所述检测算法用于检测所述数据信息的质量;根据所述检测算法,采用分布式计算的方式对所述数据信息进行检测,获取检测结果;根据所述检测结果和预先设置的检测条件,确定所述数据信息的质量。
【技术特征摘要】
1.一种数据质量检测方法,其特征在于,包括:获取数据信息和检测算法,所述数据信息为预检测的数据信息,所述检测算法用于检测所述数据信息的质量;根据所述检测算法,采用分布式计算的方式对所述数据信息进行检测,获取检测结果;根据所述检测结果和预先设置的检测条件,确定所述数据信息的质量。2.如权利要求1所述的方法,其特征在于,在所述获取检测算法之前,所述方法还包括:获取检测规则信息,所述检测规则信息用于指示检测所述数据信息的规则;所述获取检测算法,包括:根据所述检测规则信息和预先设置的算法模型,生成检测算法。3.如权利要求1所述的方法,其特征在于,在所述根据所述检测算法对所述数据信息进行检测,获取检测结果之前,所述方法还包括:通过所述检测算法关联所述检测规则信息和所述数据信息。4.如权利要求1所述的方法,其特征在于,所述根据所述检测结果和预先设置的检测条件,确定所述数据信息的质量,包括:若所述检测结果满足预先设置的检测条件,则展示界面信息,所述界面信息用于表示所述数据信息未存在质量问题;若所述检测结果不满足预先设置的检测条件,则展示告警信息,所述告警信息用于表示所述数据信息存在质量问题。5.如权利要求1至4任一项所述的方法,其特征在于,所述获取数据信息,包括:获取原始数据,所述原始数据为预检测的数据信息;根据预先设置的操作,对所述原始数...
【专利技术属性】
技术研发人员:金日海,王怡君,王双,刘俊良,
申请(专利权)人:成都四方伟业软件股份有限公司,
类型:发明
国别省市:四川,51
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。