一种数据检查方法、装置、电子设备及存储介质制造方法及图纸

技术编号:20724754 阅读:27 留言:0更新日期:2019-03-30 17:39
本公开公开了一种数据检查方法、装置、电子设备及存储介质。其中,该方法包括:获取预设时间段内的各商品展示页面的拼接数据,以及在各商品展示页面触发的所有事件的监测数据;根据拼接数据确定在各商品展示页面触发事件的监测数量;根据所有事件的监测数据确定在各商品展示页面触发事件的实际数量;若判断监测数量与实际数量不一致,则对所有事件的监测数据进行数据拼接,得到预设时间段内的各商品展示页面的修正拼接数据;采用修正拼接数据替换预设时间段内的各商品展示页面的拼接数据。本公开实施例解决了没有有效措施可以根据实际监测数据对拼接数据进行检测和修正的问题,可以根据实际监测数据对数据库存储的拼接数据进行自动检测和修正。

【技术实现步骤摘要】
一种数据检查方法、装置、电子设备及存储介质
本公开实施例涉及数据处理技术,尤其涉及一种数据检查方法、装置、电子设备及存储介质。
技术介绍
在发布不同的商品展示页面后,会对各个商品展示页面的多个事件进行监测,获取与事件对应的监测数据。例如,对各个商品展示页面的点击事件,购买事件,以及扣费事件进行监测。为了便于对各个商品展示页面的数据进行分析与统计,需要对每一个商品展示页面对应的全部监测数据进行拼接,形成一张数据表,即每一个商品展示页面对应的一张数据表。现有技术中,通常在获取各个商品展示页面的监测数据后,直接进行拼接,然后将拼接后的数据存储至数据库中。现有技术存在以下缺陷:由于监测数据的数据量十分庞大,服务器负担大,当出现网络问题或其他系统故障时,获取事件对应的监测数据的时间可能会延后,导致某一时间段的实际监测数据和拼接后的数据不对应。例如,某个用户2点的点击数据,4点才获取到,造成2点的实际监测数据和拼接后的数据不对应。现有技术没有有效措施可以根据实际监测数据对拼接数据进行检测和修正。
技术实现思路
本公开提供一种数据检查方法、装置、电子设备及存储介质,以实现根据实际监测数据对数据库存储的拼接数据进行自动检测和修正。第一方面,本公开实施例提供了一种数据检查方法,包括:获取预设时间段内的各商品展示页面的拼接数据,以及在各商品展示页面触发的所有事件的监测数据;其中,拼接数据由在预设时间段内获取到的在各商品展示页面触发的事件的监测数据拼接而成;根据拼接数据确定在各商品展示页面触发事件的监测数量;根据所有事件的监测数据,确定在各商品展示页面触发事件的实际数量;若判断监测数量与实际数量不一致,则对所有事件的监测数据进行数据拼接,得到预设时间段内的各商品展示页面的修正拼接数据;采用修正拼接数据替换预设时间段内的各商品展示页面的拼接数据。上述方案中,可选的是,事件包括点击事件,购买事件,以及扣费事件;根据拼接数据确定在各商品展示页面触发事件的监测数量,包括:根据拼接数据分别获取在各商品展示页面触发的点击事件数量、购买事件数量、以及扣费事件数量,并求和;将求和结果作为在各商品展示页面触发事件的监测数量。上述方案中,可选的是,还包括:若监测数量与实际数量不一致,根据拼接数据以及所有事件的监测数据确定问题事件;根据问题事件的监测数据生成问题反馈信息。上述方案中,可选的是,对所有事件的监测数据进行数据拼接,得到预设时间段内的各商品展示页面的修正拼接数据,包括:对所有事件的监测数据进行分片,得到预设数量的分片数据包;将分片数据包发送至对应的数据拼接服务器,以使各数据拼接服务器分别对分片数据包中的监测数据进行数据拼接;获取各数据拼接服务器生成的预设时间段内的各商品展示页面的修正拼接数据。上述方案中,可选的是,对所有事件的监测数据进行分片,得到预设数量的分片数据包,包括:确定在各商品展示页面触发的事件数量;针对每个分片数据包,将在同一个商品展示页面触发的所有事件的监控数据分配至同一个分片数据包内;汇总分片数据包,得到预设数量的分片数据包;其中,分片数据包中的监控数据对应的事件数量等于在至少一个商品展示页面触发的事件数量。上述方案中,可选的是,预设数量等于数据拼接服务器的数量。第二方面,本公开实施例还提供了一种数据检查装置,其特征在于,包括:数据获取模块,用于获取预设时间段内的各商品展示页面的拼接数据,以及在各商品展示页面触发的所有事件的监测数据;其中,拼接数据由在预设时间段内获取到的在各商品展示页面触发的事件的监测数据拼接而成;第一数量确定模块,用于根据拼接数据确定在各商品展示页面触发事件的监测数量;第二数量确定模块,用于根据所有事件的监测数据,确定在各商品展示页面触发事件的实际数量;数据拼接模块,用于若判断监测数量与所述实际数量不一致,则对所有事件的监测数据进行数据拼接,得到预设时间段内的各商品展示页面的修正拼接数据;数据替换模块,用于采用修正拼接数据替换预设时间段内的各商品展示页面的拼接数据。上述方案中,可选的是,事件包括点击事件,购买事件,以及扣费事件;第一数量确定模块包括:数量求和单元,用于根据拼接数据分别获取在各商品展示页面触发的点击事件数量、购买事件数量、以及扣费事件数量,并求和;数量确定单元,用于将求和结果作为在各商品展示页面触发事件的监测数量。上述方案中,可选的是,还包括:时间确定模块,用于若监测数量与实际数量不一致,根据拼接数据以及所有事件的监测数据确定问题事件;信息生成模块,用于根据问题事件的监测数据生成问题反馈信息。上述方案中,可选的是,数据拼接模块包括:数据分片单元,用于对所有事件的监测数据进行分片,得到预设数量的分片数据包;数据包发送单元,用于将分片数据包发送至对应的数据拼接服务器,以使各数据拼接服务器分别对分片数据包中的监测数据进行数据拼接;数据获取单元,用于获取各数据拼接服务器生成的预设时间段内的各商品展示页面的修正拼接数据。上述方案中,可选的是,数据分片单元包括:数量确定子单元,用于确定在各商品展示页面触发的事件数量;数据分配子单元,用于针对每个分片数据包,将在同一个商品展示页面触发的所有事件的监控数据分配至同一个分片数据包内;汇总子单元,用于汇总分片数据包,得到预设数量的分片数据包;其中,分片数据包中的监控数据对应的事件数量等于在至少一个商品展示页面触发的事件数量。上述方案中,可选的是,预设数量等于数据拼接服务器的数量。第三方面,本公开实施例还提供了一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如本公开实施例所述的数据检查方法。第四方面,本公开实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如本公开实施例所述的数据检查方法。本公开实施例通过获取预设时间段内的各商品展示页面的拼接数据,以及在各商品展示页面触发的所有事件的监测数据,其中,拼接数据由在预设时间段内获取到的在各商品展示页面触发的事件的监测数据拼接而成,然后根据拼接数据确定在各商品展示页面触发事件的监测数量,根据所有事件的监测数据确定在各商品展示页面触发事件的实际数量,在判断监测数量与实际数量不一致时,对所有事件的监测数据进行数据拼接,得到预设时间段内的各商品展示页面的修正拼接数据,并采用修正拼接数据替换预设时间段内的各商品展示页面的拼接数据,解决了现有技术没有有效措施可以根据实际监测数据对拼接数据进行检测和修正的问题,可以根据实际监测数据对数据库存储的拼接数据进行自动检测和修正。附图说明图1为本公开实施例提供的一种数据检查方法的流程图;图2为本公开实施例提供的一种数据检查方法的流程图;图3为本公开实施例提供的一种数据检查方法的流程图;图4为本公开实施例提供的一种数据检查装置的结构示意图;图5为本公开实施例提供的一种电子设备的结构示意图。具体实施方式下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本公开,而非对本公开的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本公开相关的部分而非全部结构。图1为本公开实施例提供的一种数据检查方法的流程图,本本文档来自技高网...

【技术保护点】
1.一种数据检查方法,其特征在于,包括:获取预设时间段内的各商品展示页面的拼接数据,以及在各商品展示页面触发的所有事件的监测数据;其中,所述拼接数据由在预设时间段内获取到的在各商品展示页面触发的事件的监测数据拼接而成;根据所述拼接数据确定在各商品展示页面触发事件的监测数量;根据所述所有事件的监测数据,确定在各商品展示页面触发事件的实际数量;若判断所述监测数量与所述实际数量不一致,则对所述所有事件的监测数据进行数据拼接,得到所述预设时间段内的各商品展示页面的修正拼接数据;采用所述修正拼接数据替换所述预设时间段内的各商品展示页面的拼接数据。

【技术特征摘要】
1.一种数据检查方法,其特征在于,包括:获取预设时间段内的各商品展示页面的拼接数据,以及在各商品展示页面触发的所有事件的监测数据;其中,所述拼接数据由在预设时间段内获取到的在各商品展示页面触发的事件的监测数据拼接而成;根据所述拼接数据确定在各商品展示页面触发事件的监测数量;根据所述所有事件的监测数据,确定在各商品展示页面触发事件的实际数量;若判断所述监测数量与所述实际数量不一致,则对所述所有事件的监测数据进行数据拼接,得到所述预设时间段内的各商品展示页面的修正拼接数据;采用所述修正拼接数据替换所述预设时间段内的各商品展示页面的拼接数据。2.根据权利要求1所述的方法,其特征在于,所述事件包括点击事件,购买事件,以及扣费事件;所述根据所述拼接数据确定在各商品展示页面触发事件的监测数量,包括:根据所述拼接数据分别获取在各商品展示页面触发的点击事件数量、购买事件数量、以及扣费事件数量,并求和;将求和结果作为在各商品展示页面触发事件的监测数量。3.根据权利要求1所述的方法,其特征在于,还包括:若所述监测数量与所述实际数量不一致,根据所述拼接数据以及所述所有事件的监测数据确定问题事件;根据所述问题事件的监测数据生成问题反馈信息。4.根据权利要求1所述的方法,其特征在于,所述对所述所有事件的监测数据进行数据拼接,得到所述预设时间段内的各商品展示页面的修正拼接数据,包括:对所述所有事件的监测数据进行分片,得到预设数量的分片数据包;将所述分片数据包发送至对应的数据拼接服务器,以使各数据拼接服务器分别对所述分片数据包中的监测数据进行数据拼接;获取各数据拼接服务器生成的所述预设时间段内的各商品展示页面的修正拼接数据。5.根据权利要求4所述的方法,其特征在于,所述对所述所有事件的监测数据进行分片,得到预设数量的分片数据包,包括:确定在各商品展示页面触发的事件数量;针对每个分片数据包...

【专利技术属性】
技术研发人员:王雨生徐凯
申请(专利权)人:北京字节跳动网络技术有限公司
类型:发明
国别省市:北京,11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1