数据校验方法、装置、电子设备和计算机可读介质制造方法及图纸

技术编号:26730531 阅读:7 留言:0更新日期:2020-12-15 14:31
本公开的实施例公开了数据校验方法、装置、电子设备和计算机可读介质。该方法的一具体实施方式包括:对待校验数据集合包含的至少一条数据进行数据重复校验,得到校验后数据集合;基于上述待校验数据集合的第一数据量与上述校验后数据集合的第二数据量的第一比较结果,对上述校验后数据集合内的数据进行资源校验,得到资源校验数据集合;基于上述校验后数据集合的第二数据量与上述资源校验数据集合的第三数据量的第二比较结果,生成校验信息。该实施方式提高了数据校验的准确性和有效性。

【技术实现步骤摘要】
数据校验方法、装置、电子设备和计算机可读介质
本公开的实施例涉及计算机
,具体涉及数据校验方法、装置、电子设备和计算机可读介质。
技术介绍
随着网络技术的发展,各种业务通过网络进行办理。网络上的数据处理设备可以需要提供各个数据处理服务。随着数据处理和网络的复杂度的提高,数据在网络中传输和处理的复杂度也随之提高,不可避免地出现数据丢失或数据处理错误的问题。因此,需要对数据进行校验。现有对数据的校验通常对数据的数据量进行校验,并没有针对数据的处理过程进行校验,而数据的处理过程也可能出现数据丢失或数据处理错误。因此现有的校验方法得到的校验信息的准确性和有效性不高。
技术实现思路
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。本公开的一些实施例提出了数据校验方法、装置、电子设备和计算机可读介质,来解决以上
技术介绍
部分提到的技术问题。第一方面,本公开的一些实施例提供了一种数据校验方法,该方法包括:对待校验数据集合包含的至少一条数据进行数据重复校验,得到校验后数据集合;基于上述待校验数据集合的第一数据量与上述校验后数据集合的第二数据量的第一比较结果,对上述校验后数据集合内的数据进行资源校验,得到资源校验数据集合;基于上述校验后数据集合的第二数据量与上述资源校验数据集合的第三数据量的第二比较结果,生成校验信息。第二方面,本公开的一些实施例提供了一种数据校验装置,该装置包括:重复校验单元,被配置成对待校验数据集合包含的至少一条数据进行数据重复校验,得到校验后数据集合;资源校验单元,被配置成基于上述待校验数据集合的第一数据量与上述校验后数据集合的第二数据量的第一比较结果,对上述校验后数据集合内的数据进行资源校验,得到资源校验数据集合;校验信息生成单元,被配置成基于上述校验后数据集合的第二数据量与上述资源校验数据集合的第三数据量的第二比较结果,生成校验信息。第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储器,其上存储有一个或多个程序,当上述一个或多个程序被上述一个或多个处理器执行时,使得上述一个或多个处理器执行上述第一方面的数据校验方法。第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现上述第一方面的数据校验方法。本公开的上述各个实施例中的一个实施例具有如下有益效果:首先对待校验数据集合内的数据进行数据重复校验,从数据量的层级实现了对待校验数据集合内数据的校验。有利于快速确定待校验数据集合是否存在数据重复问题,提高数据校验的效率。然后对校验后数据集合内的数据进行资源校验,从数据内容的层级实现了对校验后数据集合内的数据的校验,提高了对资源校验数据校验的有效性。如此,使得校验信息能够反映数据的丢失问题和处理错误问题,提高了数据校验的准确性和有效性。附图说明结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,元件和元素不一定按照比例绘制。图1是本公开的一些实施例的数据校验方法的应用场景的示意图;图2是根据本公开的数据校验方法的一些实施例的流程图;图3是根据本公开的数据校验方法的另一些实施例的流程图;图4是根据本公开的数据校验方法的又一些实施例的流程图;图5是根据本公开的数据校验装置的一些实施例的结构示意图;图6是适于用来实现本公开的一些实施例的电子设备的结构示意图。具体实施方式下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。另外还需要说明的是,为了便于描述,附图中仅示出了与有关专利技术相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。下面将参考附图并结合实施例来详细说明本公开。图1是根据本公开一些实施例的数据校验方法的一个应用场景的示意图。图1中,电子设备100接收到待校验数据集合101后,可以通过数据重复校验102对待校验数据集合101进行校验得到校验后数据集合103。其中,待校验数据集合101可以是各种类型的数据。例如,待校验数据集合101可以是数据服务器上某一时间段内处理的物品展示信息、物品交易信息等信息。正常情况下,待校验数据集合101包含的数据应该各不相同,如果待校验数据集合101中存在至少两个相同的数据,则说明待校验数据集合101中的数据存在问题。电子设备100可以通过数据重复校验102查询待校验数据集合101是否包含多个相同的数据。数据重复校验102可以是各种用于检查数据重复的应用程序。经数据重复校验102后,得到的校验后数据集合103中没有重复的数据。电子设备100可以比较待校验数据集合101内数据的总数量(即第一数据量)和校验后数据集合103内数据的总数量(即第二数据量),得到第一比较结果。则第一比较结果为:第一数据量和第二数据量相同,或第一数据量和第二数据量不同。电子设备100可以根据第一比较结果对校验后数据集合103进行资源校验104,得到资源校验数据集合105。其中,资源校验104可以是各种用于资源处理的应用程序(例如可以是资源扣除程序等)。资源校验数据集合105则是对校验后数据集合103进行资源扣除后的数据构成的。电子设备100可以比较校验后数据集合103内数据的总数量(即第二数据量)与资源校验数据集合105内数据的总数量(即第三数据量),得到第二比较结果。则第二比较结果为:第二数据量和第三数据量相同,或第二数据量和第三数据量不同。电子设备100可以根据第二比较结果生成校验信息。则,校验信息可以是资源校验数据集合105存在数据丢失,或资源校验数据集合105数据完整。校验信息还可以在第一数据量和第二数据量不同时生成。此时,校验信息可以是待校验数据集合101存在数据重复。由上述描述可知,数据重复校验102从数据量上对待校验数据集合101进行了处理。资源校验104从数据内容上对待校本文档来自技高网...

【技术保护点】
1.一种数据校验方法,包括:/n对待校验数据集合包含的至少一条数据进行数据重复校验,得到校验后数据集合;/n基于所述待校验数据集合的第一数据量与所述校验后数据集合的第二数据量的第一比较结果,对所述校验后数据集合内的数据进行资源校验,得到资源校验数据集合;/n基于所述校验后数据集合的第二数据量与所述资源校验数据集合的第三数据量的第二比较结果,生成校验信息。/n

【技术特征摘要】
1.一种数据校验方法,包括:
对待校验数据集合包含的至少一条数据进行数据重复校验,得到校验后数据集合;
基于所述待校验数据集合的第一数据量与所述校验后数据集合的第二数据量的第一比较结果,对所述校验后数据集合内的数据进行资源校验,得到资源校验数据集合;
基于所述校验后数据集合的第二数据量与所述资源校验数据集合的第三数据量的第二比较结果,生成校验信息。


2.根据权利要求1所述的方法,其中,所述数据包括数据编号;以及
所述对待校验数据集合包含的至少一条数据进行数据重复校验,得到校验后数据集合,包括:
对于所述待校验数据集合中的每条数据,通过该数据的数据编号与所述待校验数据集合内其他数据的数据编号进行比较,确定与该数据的数据编号相同的重复数据;
通过所述待校验数据集合内的、除所述重复数据以外的数据构成校验后数据集合。


3.根据权利要求1所述的方法,其中,所述基于所述待校验数据集合的第一数据量与所述校验后数据集合的第二数据量的第一比较结果,对所述校验后数据集合内的数据进行资源校验,得到资源校验数据集合,包括:
响应于所述第一比较结果为第一数据量与第二数据量不同,发出第一告警信号,并通过所述待校验数据集合内的重复数据生成第一校验信息。


4.根据权利要求1所述的方法,其中,所述基于所述待校验数据集合的第一数据量与所述校验后数据集合的第二数据量的第一比较结果,对所述校验后数据集合内的数据进行资源校验,得到资源校验数据集合,包括:
响应于所述第一比较结果为第一数据量与第二数据量相同,对所述校验后数据集合内的数据进行资源校验,得到资源校验数据集合。


5.根据权利要求4所述的方法,其中,所述对所述校验后数据集合内的数据进行资源校验,得到资源校验数据集合,包括:
对于所述校验后数据集合中的每一条数据,将该数据导入预先设定的资源处理系统,得到对应每一条数据的资源校验数据。


6.根据权利要求5所述的方法,其中,所述基于所述校验...

【专利技术属性】
技术研发人员:张婕巩秋铭
申请(专利权)人:北京有竹居网络技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1