流量数据质量检核方法、装置、电子设备及存储介质制造方法及图纸

本申请涉及数据分析技术领域，提供一种流量数据质量检核方法、装置、电子设备及存储介质，该方法包括：获取流量数据的检核主体以及用户的业务需求，检核主体包括活动页面和/或用户行为；利用检核主体和业务需求设计相应的检核对象；其中，活动页面对应的检核对象包括：浏览页面、页面对象，用户行为对应的检核对象包括：用户身份、用户来源、用户去向以及交互行为；页面对象为浏览页面中对应的可操作对象，交互行为为用户在浏览页面上的操作行为；基于设计的检核对象确定检核规则，并基于检核规则对流量数据进行质量检核。这样，可以全面性地考虑活动参与的各个主体的检核，确保流量数据质量的各方面都能被检查，提高检查的准确性。提高检查的准确性。提高检查的准确性。

【技术实现步骤摘要】
流量数据质量检核方法、装置、电子设备及存储介质


[0001]本申请涉及数据分析
，尤其涉及一种流量数据质量检核方法、装置、电子设备及存储介质。

技术介绍

[0002]随着计算机技术的快速发展，监控终端可以实时获取网络接入设备的多个端口的流量数据，并从获取的流量数据中检测流量数据的质量，以此监测用户页面的行为，了解用户对活动要素的偏好，其中，流量数据基于页面埋点产生，页面埋点通常由开发人员实施。
[0003]现有技术，监控终端中存储有用户根据经验设置的流量阈值范围，当获取到流量数据之后，监控终端可以判断获取的流量数据是否处于该流量阈值范围之内进行质量检测。
[0004]但是，上述检测方式只是从数据角度进行的数据检核，检核流量数据的准确性较低。

技术实现思路

[0005]本申请提供一种流量数据质量检核方法、装置、电子设备及存储介质，可以全面性地考虑活动参与的各个主体的检核，确保流量数据质量的各方面都能被检查，提高检查的准确性。
[0006]第一方面，本申请提供一种流量数据质量检核方法，所述方法包括：
[0007]获取流量数据的检核主体以及用户的业务需求，所述检核主体包括活动页面和/或用户行为；
[0008]利用所述检核主体和所述业务需求设计相应的检核对象；其中，活动页面对应的检核对象包括：浏览页面、页面对象，用户行为对应的检核对象包括：用户身份、用户来源、用户去向以及交互行为；所述页面对象为所述浏览页面中对应的可操作对象，所述交互行为为用户在所述浏览页面上的操作行为；
[0009]基于设计的检核对象确定检核规则，并基于所述检核规则对流量数据进行质量检核。
[0010]可选的，利用所述检核主体和所述业务需求设计相应的检核对象，包括：
[0011]利用所述检核主体圈定所需的检核对象；
[0012]基于所述业务需求获取所需检核对象的优先级，并基于所述优先级确定检核对象的种类以及每一种检核对象对应的所需检测流量数据的数量。
[0013]可选的，基于设计的检核对象确定检核规则，包括：
[0014]基于所述检核对象的种类以及每一种检核对象对应的所需检测流量数据的数量确定满足业务需求的检核维度，所述检核维度包括：完整性、一致性、存在性、有效性以及透传性；所述完整性用于检查流量数据的记录是否完整；所述一致性用于检查流量数据的记录是否与预定义文档中的数据保持统一；所述存在性用于检查流量数据中记录是否存在；
所述有效性用于检查流量数据中记录是否存在异常或者错误信息；所述透传性用于检查流量数据中记录是否存在于所有浏览页面；
[0015]根据所述检核维度形成检核规则，并获取该检核规则中的检核指标；所述检核指标用于对流量数据进行质量检核。
[0016]可选的，根据所述检核维度形成检核规则，包括：
[0017]获取所述业务需求对应的应用场景，并基于所述应用场景获取每一检核维度对应的检核指标以及检核指标的数量；
[0018]基于检测指标的数量选取对应的算法，并利用所述算法对每一检核维度对应的检核指标进行处理，得到检核规则。
[0019]可选的，基于所述检核规则对流量数据进行质量检核，包括：
[0020]获取流量表中的流量数据，并提取流量数据中的检验字段；所述流量表用于存储浏览页面中埋点采集到的数据；
[0021]利用所述检核规则中的检核指标对所述检验字段进行检核，以检测所述流量数据是否异常。
[0022]可选的，所述方法还包括：
[0023]在检测到所述流量数据异常后，获取异常的流量数据对应的页面身份标识ID；
[0024]基于所述页面ID查找到对应的浏览页面，并获取该浏览页面对应的埋点数据，将该埋点数据反馈到开发人员的终端设备，以使开发人员基于所述埋点数据重新埋点。
[0025]可选的，所述方法还包括：
[0026]获取预设时间内质量检核的结果，并对所述结果中包含异常的流量数据进行汇总统计，得到汇总结果；
[0027]将所述汇总结果进行质量趋势可视化分析处理，得到处理结果，并将所述处理结果发送至开发人员的终端设备。
[0028]第二方面，本申请提供一种流量数据质量检核装置，所述装置包括：
[0029]获取模块，用于获取流量数据的检核主体以及用户的业务需求，所述检核主体包括活动页面和/或用户行为；
[0030]设计模块，用于利用所述检核主体和所述业务需求设计相应的检核对象；其中，活动页面对应的检核对象包括：浏览页面、页面对象，用户行为对应的检核对象包括：用户身份、用户来源、用户去向以及交互行为；所述页面对象为所述浏览页面中对应的可操作对象，所述交互行为为用户在所述浏览页面上的操作行为；
[0031]检核模块，用于基于设计的检核对象确定检核规则，并基于所述检核规则对流量数据进行质量检核。
[0032]第三方面，本申请提供一种电子设备，包括：处理器，存储器以及计算机程序；其中，所述计算机程序被存储在所述存储器中，并且被配置为由所述处理器执行，所述计算机程序包括用于执行如第一方面中任一项所述的流量数据质量检核方法的指令。
[0033]第四方面，本申请提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如第一方面中任一项所述的方法。
[0034]第五方面，本申请提供一种计算机程序产品，包括程序代码，当计算机运行所述计
算机程序时，所述程序代码执行如第一方面中任一项所述的方法。
[0035]综上所述，本申请提供一种流量数据质量检核方法、装置、电子设备及存储介质，可以通过获取流量数据的检核主体以及用户的业务需求，检核主体包括活动页面和/或用户行为；进一步的，利用检核主体和业务需求设计相应的检核对象；其中，活动页面对应的检核对象包括：浏览页面、页面对象，用户行为对应的检核对象包括：用户身份、用户来源、用户去向以及交互行为；页面对象为浏览页面中对应的可操作对象，交互行为为用户在浏览页面上的操作行为；进而可以基于设计的检核对象确定检核规则，并基于检核规则对流量数据进行质量检核。这样，本申请从活动运营的业务角度出发，设计业务检核主体及对象、业务检核规则，并结合数据角度进行核验，全面性地考虑活动参与的各个主体的检核，确保数据质量的各方面都能被检查，提高检查的准确性。
附图说明
[0036]此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
[0037]图1为本申请实施例提供的一种应用场景示意图；
[0038]图2为本申请实施例提供的一种流量数据质量检核方法的流程示意图；
[0039]图3为本申请实施例提供的一种流量数据质量检核框架的示意图；
[0040]图4为本申请实施例提供的一种设计检核规则的结构示意图；
[0041]图5为本申请实施例提供本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种流量数据质量检核方法，其特征在于，所述方法包括：获取流量数据的检核主体以及用户的业务需求，所述检核主体包括活动页面和/或用户行为；利用所述检核主体和所述业务需求设计相应的检核对象；其中，活动页面对应的检核对象包括：浏览页面、页面对象，用户行为对应的检核对象包括：用户身份、用户来源、用户去向以及交互行为；所述页面对象为所述浏览页面中对应的可操作对象，所述交互行为为用户在所述浏览页面上的操作行为；基于设计的检核对象确定检核规则，并基于所述检核规则对流量数据进行质量检核。2.根据权利要求1所述的方法，其特征在于，利用所述检核主体和所述业务需求设计相应的检核对象，包括：利用所述检核主体圈定所需的检核对象；基于所述业务需求获取所需检核对象的优先级，并基于所述优先级确定检核对象的种类以及每一种检核对象对应的所需检测流量数据的数量。3.根据权利要求2所述的方法，其特征在于，基于设计的检核对象确定检核规则，包括：基于所述检核对象的种类以及每一种检核对象对应的所需检测流量数据的数量确定满足业务需求的检核维度，所述检核维度包括：完整性、一致性、存在性、有效性以及透传性；所述完整性用于检查流量数据的记录是否完整；所述一致性用于检查流量数据的记录是否与预定义文档中的数据保持统一；所述存在性用于检查流量数据中记录是否存在；所述有效性用于检查流量数据中记录是否存在异常或者错误信息；所述透传性用于检查流量数据中记录是否存在于所有浏览页面；根据所述检核维度形成检核规则，并获取该检核规则中的检核指标；所述检核指标用于对流量数据进行质量检核。4.根据权利要求3所述的方法，其特征在于，根据所述检核维度形成检核规则，包括：获取所述业务需求对应的应用场景，并基于所述应用场景获取每一检核维度对应的检核指标以及检核指标的数量；基于检测指标的数量选取对应的算法，并利用所述算法对每一检核维度对应的检核指标进行处理，得到检核规则。5.根据权利要求3所述的方法，其特征在于，基于所述检核规则对流量数据进行质量检核，包括：获取流量表中的流量数据，并提取流量数据中的检验字段；所述流量表用于存储浏览页面中埋点采集...

【专利技术属性】
技术研发人员：李铁梅，王崇鉴，余秋叶，解一甲，
申请(专利权)人：建信金融科技有限责任公司，
类型：发明
国别省市：