【技术实现步骤摘要】
一种数据质量检核方法、系统、设备及可读存储介质
本专利技术涉及数据库技术，尤其涉及一种数据质量检核方法、系统、设备及可读存储介质。
技术介绍
基于高校现有的数据质量检核，目前采用的技术方法是采用六大质量检核纬度，包括一致性、完整性、准确性、规范性、时效性、关联性等方面，去保障数据质量检核多角度达标。在现有的高校共享数据中心架构中，数据统一由各个业务部门业务系统采集至数据中心前置节点，在此基础上将数据汇入共享数据中心，通过数据中心进行数据质量检核处理，从而提高学校业务数据质量。但是，此种做法对数据质量保障仍有部分安全风险存在。在以往的经验中，数据的安全、可靠依赖于业务部门正确的生产、使用和维护数据。在这个过程中，存在着业务部门对数据误操作的风险，而系统并没有提供相应的数据安全保障机制，一旦出现大规模数据的误操作，将严重影响数据中心前置节点数据安全和可靠，进而严重影响共享数据中心整体数据质量。另外，现有技术还存在以下缺点：(1)无法对源数据进行质量监控。现有的技术方案是先形成数据标准，再进行数据质...
【技术保护点】
1.一种数据质量检核方法，其特征在于，包括：/n设置质量检核规则及数据权重规则；/n将所述质量检核规则与数据分区进行关联；/n判断所述数据分区是否有更新数据输入，判断为是，根据所述数据分区对应的质量检核规则对所述更新数据进行检核处理，生成检核结果；/n根据所述质量检核规则及数据权重规则计算所述检核结果的质量权重值；/n判断所述质量权重值是否大于预设警报值，判断为是，向更新数据的数据提供方发出质量警报信息及所述检核结果，获取所述数据提供方的质量处理结果，根据所述质量处理结果进行二次警报处理，判断为否，根据所述更新数据对所述数据分区进行更新处理，并向所述数据提供方发送所述检核结果。/n
【技术特征摘要】
1.一种数据质量检核方法，其特征在于，包括：
设置质量检核规则及数据权重规则；
将所述质量检核规则与数据分区进行关联；
判断所述数据分区是否有更新数据输入，判断为是，根据所述数据分区对应的质量检核规则对所述更新数据进行检核处理，生成检核结果；
根据所述质量检核规则及数据权重规则计算所述检核结果的质量权重值；
判断所述质量权重值是否大于预设警报值，判断为是，向更新数据的数据提供方发出质量警报信息及所述检核结果，获取所述数据提供方的质量处理结果，根据所述质量处理结果进行二次警报处理，判断为否，根据所述更新数据对所述数据分区进行更新处理，并向所述数据提供方发送所述检核结果。
2.如权利要求1所述数据质量检核方法，其特征在于，所述设置质量检核规则及数据权重规则的步骤包括：
对每个所述质量检核规则设置规则权重值；
对所述数据权重规则中每个数据项设置对应的数据权重值。
3.如权利要求1所述数据质量检核方法，其特征在于，所述根据所述质量检核规则及数据权重规则计算所述检核结果的质量权重值的步骤包括：
判断所述检核结果中是否有数据项未通过任一所述质量检核规则的检核，
判断为是，逐一计算所述数据项的质量权重值WQ，并以所有所述数据项的质量权重值作为所述检核结果的质量权重值：
WQ＝WLSUM×WD
其中，WQ为所述数据项的质量权重值，WLSUM为所述数据项未通过的所有质量检核规则的所述规则权重值之和，WD为所述数据项的数据权重值；
判断为否，将质量权重值设为预设最小值，所述预设最小值小于所述预设警报值。
4.如权利要求1所述数据质量检核方法，其特征在于，所述根据所述更新数据对所述数据分区进行更新处理的步骤包括：
判断所述数据分区中所述更新数据对应的数据项是否为空，判断为是，在所述数据项中插入所述更新数据，判断为否，将所述数据项的数据值修改为所述更新数据。
5.一种数据质量检核系统，其特征在于，包括：
规则设置模块，用于设置质量检核规则及数据权重规则；
规则关联模块，用于将所述质量检核规则与数据分区进行关联；
检核模块，用于判断所述数据分区是否有更新数据输入，判断为...
【专利技术属性】
技术研发人员：王新宇，张健博，刘栋梁，王晋民，卢国资，
申请(专利权)人：三盟科技股份有限公司，
类型：发明
国别省市：广东;44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。