流量数据的处理方法、装置、电子设备及存储介质制造方法及图纸

技术编号:38902627 阅读:18 留言:0更新日期:2023-09-22 14:21
本公开提供了流量数据的处理方法、装置、电子设备及存储介质,涉及计算机技术领域,尤其涉及互联网、大数据等技术领域。具体实现方案为:在待测流量对应的标识属于目标标识维度的情况下,提取待测流量,其中,目标标识维度为基于检测结果发生误判的目标历史流量得到的;对待测流量的时序信息进行检测,得到第一检测结果;基于第一检测结果生成待测流量的上报信息,将上报信息发送至规则引擎,其中,所述规则引擎用于基于上报信息检测待测流量。本公开提供的技术方案,能够提高对待测流量检测的准确性。性。性。

【技术实现步骤摘要】
流量数据的处理方法、装置、电子设备及存储介质


[0001]本公开涉及计算机
,尤其涉及互联网、大数据等


技术介绍

[0002]现有技术中,一般是基于规则引擎对业务流量进行检测,以检测出如爬虫流量等业务异常流量,然而采用规则引擎对流量进行检测的时候,得到的流量的检测结果可能会出现误判,比如将异常的流量检测为正常的流量。因此,如何能够提升对流量检测的准确率,就成为需要解决的问题。

技术实现思路

[0003]本公开提供了一种流量数据的处理方法、装置、电子设备及存储介质。
[0004]根据本公开的第一方面,提供了一种流量数据的处理方法,包括:
[0005]在待测流量对应的标识属于目标标识维度的情况下,提取所述待测流量,其中,所述目标标识维度为基于检测结果发生误判的目标历史流量得到的;
[0006]对所述待测流量的时序信息进行检测,得到第一检测结果,其中,所述第一检测结果用于指示所述待测流量的时序信息是否正常;
[0007]基于所述第一检测结果生成所述待测流量的上报信息,将所述上报信息发送至规则引擎,其中,所述规则引擎用于基于所述上报信息检测所述待测流量。
[0008]根据本公开的第二方面,提供了一种流量数据的处理装置,包括:
[0009]待测流量获取模块,用于在待测流量对应的标识属于目标标识维度的情况下,提取所述待测流量,其中,所述目标标识维度为基于检测结果发生误判的目标历史流量得到的;
[0010]第一时序检测模块,用于对所述待测流量的时序信息进行检测,得到第一检测结果,其中,所述第一检测结果用于指示所述待测流量的时序信息是否正常;
[0011]上报信息生成模块,用于基于所述第一检测结果生成所述待测流量的上报信息,将所述上报信息发送至规则引擎,其中,所述规则引擎用于基于所述上报信息检测所述待测流量。
[0012]根据本公开的第三方面,提供了一种电子设备,包括:
[0013]至少一个处理器;以及
[0014]与所述至少一个处理器通信连接的存储器;其中,
[0015]所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述第一方面的流量数据的处理方法。
[0016]根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,该计算机指令用于使该计算机执行前述第一方面的流量数据的处理方法。
[0017]根据本公开的第五方面,提供了一种计算机程序产品,包括计算机程序,该计算机程序在被处理器执行时实现前述第一方面的流量数据的处理方法。
[0018]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
[0019]本实施例提供的技术方案,能够基于目标标识维度提取容易发生误判的待测流量;针对该容易发生误判的待测流量,在采用规则引擎检测前,进行了时序检测,及根据时序检测得到的第一检测结果生成上报信息,以使得规则引擎可以基于该上报信息更准确检测所述待测流量,如此能够通过预先对容易发生误判的待测流量预先进行时序检测,结合时序检测的结果再生成上报信息,使得规则引擎通过上报信息再进行待测流量的检测,可以降低规则引擎发生误判的概率,从而提高对待测流量检测的准确性。
附图说明
[0020]附图用于更好地理解本方案,不构成对本公开的限定。其中:
[0021]图1是根据本公开一实施例提供的流量数据的处理方法的流程示意图;
[0022]图2是根据本公开一实施例提供的正常时序序列趋势图;
[0023]图3是根据本公开一实施例提供的异常时序序列趋势图;
[0024]图4是根据本公开一实施例提供的对待测流量的处理流程示意图;
[0025]图5是根据本公开一实施例提供的流量数据的处理装置的一种示意性框图;
[0026]图6是根据本公开一实施例提供的流量数据的处理装置的又一种示意性框图;
[0027]图7是本公开实施例提供的电子设备的框图。
具体实施方式
[0028]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0029]本公开第一方面实施例提供了一种流量数据的处理方法,如图1所示,包括:
[0030]S101,在待测流量对应的标识属于目标标识维度的情况下,提取所述待测流量,其中,所述目标标识维度为基于检测结果发生误判的目标历史流量得到的;
[0031]S102,对所述待测流量的时序信息进行检测,得到第一检测结果,其中,所述第一检测结果用于指示所述待测流量的时序信息是否正常;
[0032]S103,基于所述第一检测结果生成所述待测流量的上报信息,将所述上报信息发送至规则引擎,其中,所述规则引擎用于基于所述上报信息检测所述待测流量。
[0033]上述流量数据的处理方法可以由电子设备实现。示例性的,该电子设备可以是具备计算能力和/或处理能力的终端或服务器等。
[0034]通过采用上述方案,能够基于目标标识维度提取容易发生误判的待测流量;针对该容易发生误判的待测流量,在采用规则引擎检测前,进行了时序检测,及根据时序检测得到的第一检测结果生成上报信息,以使得规则引擎可以基于该上报信息更准确检测所述待测流量,如此能够通过预先对容易发生误判的待测流量预先进行时序检测,结合时序检测的结果再生成上报信息,使得规则引擎通过上报信息再进行待测流量的检测,可以降低规则引擎发生误判的概率,从而提高对待测流量检测的准确性。
[0035]在一些可能的实施方式中,在确定所述待测流量对应的标识属于目标标识维度之前,所述方法还包括:对候选历史流量的时序信息进行检测,得到所述候选历史流量的时序检测结果,其中,所述候选历史流量的检测结果为异常;在基于所述候选历史流量的时序检测结果,确定所述候选历史流量的检测结果发生误判的情况下,将所述候选历史流量作为目标历史流量,基于所述目标历史流量对应的标识所属的标识维度,得到所述目标标识维度。
[0036]其中,所述对候选历史流量的时序信息进行检测,得到所述候选历史流量的时序检测结果之前,可以包括:获取规则引擎对多个历史流量的检测结果,在任意一个历史流量为异常的情况下,获取该历史流量,并将该历史流量作为候选历史流量。针对检测结果为异常的一个或多个历史流量中每个历史流量均可以分别作为候选历史流量进行相同的分析和处理,这里不做一一赘述。
[0037]其中,所述获取规则引擎对多个历史流量的检测结果之前,可以包括:生成多个历史流量,将所述多个历史流量发送至规则引擎。所述生成多个历本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种流量数据的处理方法,包括:在待测流量对应的标识属于目标标识维度的情况下,提取所述待测流量,其中,所述目标标识维度为基于检测结果发生误判的目标历史流量得到的;对所述待测流量的时序信息进行检测,得到第一检测结果,其中,所述第一检测结果用于指示所述待测流量的时序信息是否正常;基于所述第一检测结果生成所述待测流量的上报信息,将所述上报信息发送至规则引擎,其中,所述规则引擎用于基于所述上报信息检测所述待测流量。2.根据权利要求1所述的方法,其中,所述基于所述第一检测结果生成所述待测流量的上报信息,将所述上报信息发送至规则引擎,包括:在所述第一检测结果指示所述待测流量的时序信息是正常的情况下,对所述待测流量对应的多种特征中的标识的属性特征进行过滤,得到所述待测流量的一个或多个待上报特征,将所述一个或多个待上报特征添加至上报信息中,发送所述上报信息至所述规则引擎。3.根据权利要求1所述的方法,所述方法还包括:对候选历史流量的时序信息进行检测,得到所述候选历史流量的时序检测结果,其中,所述候选历史流量的检测结果为异常;在基于所述候选历史流量的时序检测结果,确定所述候选历史流量的检测结果发生误判的情况下,将所述候选历史流量作为目标历史流量,基于所述目标历史流量对应的标识所属的标识维度,得到所述目标标识维度。4.根据权利要求1所述的方法,其中,所述对所述待测流量的时序信息进行检测,得到第一检测结果,包括:计算所述待测流量的时序信息与多个第一参考数据的多个第一相似度,其中,所述多个第一参考数据包括多个第一正常时序参考数据和一个或多个第一异常时序参考数据,所述多个第一正常时序参考数据的数量大于所述一个或多个第一异常时序参考数据的数量,所述多个第一相似度中不同的第一相似度对应不同的第一参考数据;从所述多个第一相似度中选取最大的第一数量个第一目标相似度,确定所述第一数量个第一目标相似度分别对应的第一目标参考数据,其中,所述第一数量小于所述多个第一相似度的数量;在所述第一数量个第一目标相似度分别对应的第一目标参考数据中,第一正常时序目标参考数据的数量大于第一异常时序目标参考数据的数量的情况下,得到第一检测结果,所述第一检测结果用于指示所述待测流量的时序信息为正常。5.根据权利要求1所述的方法,其中,所述将所述上报信息发送至规则引擎之后,所述方法还包括:从所述规则引擎获取所述待测流量的第二检测结果,其中,所述第二检测结果为基于所述上报信息对所述待测流量检测得到的;在基于所述第二检测结果确定所述待测流量正常的情况下,对所述待测流量的时序信息进行检测,得到第三检测结果;在所述第三检测结果指示所述待测流量的时序信息是异常的情况下,确定所述待测流量是异常流量。6.根据权利要求5所述的方法,其中,所述对所述待测流量的时序信息进行检测,得到
第三检测结果,包括:计算所述待测流量的时序信息与多个第二参考数据的多个第二相似度,其中,所述多个第二参考数据包括一个或多个第二正常时序参考数据和多个第二异常时序参考数据,所述一个或多个第二正常时序参考数据的数量小于所述多个第二异常时序参考数据的数量,所述多个第二相似度中不同的第二相似度对应不同的第二参考数据;从所述多个第二相似度中选取最大的第二数量个第二目标相似度,确定所述第二数量个第二目标相似度分别对应的第二目标参考数据,其中,所述第二数量小于所述多个第二相似度的数量;在所述第二数量个第二目标相似度分别对应的第二目标参考数据中,第二正常时序目标参考数据的数量小于第二异常时序目标参考数据的数量的情况下,得到第三检测结果,所述第三检测结果用于指示所述待测流量是异常流量。7.一种流量数据的处理装置,包括:待测流量获取模块,用于在待测流量对应的标识属于目标标识维度的情况下,提取所述待测流量,其中,所述目标标识维度为基于检测结果发生误判的目标历史流量得到的;第一时序检测模块,用于对所述待测流量的时序信息进行检测,得到第一检测结果,其中,所述第一...

【专利技术属性】
技术研发人员:李任鹏
申请(专利权)人:北京百度网讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1