System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种网络传输数据异常节点检测方法及装置制造方法及图纸_技高网

一种网络传输数据异常节点检测方法及装置制造方法及图纸

技术编号:40633680 阅读:3 留言:0更新日期:2024-03-13 21:18
本发明专利技术可用于数据通信技术在金融方面应用的技术领域,本发明专利技术提供了一种网络传输数据异常节点检测方法及装置,对应的方法包括:从网络中获取传输数据请求的至少一部分操作或事件;其中,所述网络基于交换端到端传输模式连接多个服务器节点;根据业务需求以及所述网络的性能生成滑动窗口;其中,所述滑动窗口按照传输时间进行滑动;根据所述至少一部分操作或事件以及所述滑动窗口检测传输数据异常节点。本发明专利技术针对交换端到端的网络传输模式,提供一种网络传输数据异常节点检测方法,该方法可以实时或近实时地进行传输数据异常节点检测,以提高对分布式链路异常的响应速度和准确性。

【技术实现步骤摘要】

本申请属于数据通信,特别是网络维护,具体涉及一种网络传输数据异常节点检测方法及装置


技术介绍

1、针对网络传输数据异常节点检测,现有技术中一般采用分布式链路追踪系统(如zipkin)或对应的方法予以解决,链路追踪数据通常采用tcp/ip网络进行传输和聚合,这种方式在大规模和复杂的分布式系统中可能会导致带宽瓶颈和较高的数据传输延迟。此外,现有技术对异常检测的实时性和准确性要求较高,在处理大量链路追踪数据时,其性能可能受到限制。


技术实现思路

1、本专利技术可用于数据通信技术在金融方面应用的
,也可用于除金融领域之外的任意领域。

2、本专利技术的一个目的在于针对交换端到端的网络传输模式,提供一种网络传输数据异常节点检测方法,该方法可以实时或近实时地进行传输数据异常节点检测,以提高对分布式链路异常的响应速度和准确性。

3、本专利技术的另一个目的在于提供一种网络传输数据异常节点检测装置。本专利技术的还一个目的在于提供一种电子设备,该电子设备包括存储器和处理器,存储器存储有计算机程序,处理器执行计算机程序时实现上述网络传输数据异常节点检测方法的步骤。本专利技术的还一个目的在于提供一种可读介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述网络传输数据异常节点检测方法的步骤。

4、为解决本申请
技术介绍
中的技术问题,本专利技术提供以下技术方案:

5、第一方面,本专利技术提供一种网络传输数据异常节点检测方法包括:

6、从网络中获取传输数据请求的至少一部分操作或事件;其中,所述网络基于交换端到端传输模式连接多个服务器节点;

7、根据业务需求以及所述网络的性能生成滑动窗口;其中,所述滑动窗口按照传输时间进行滑动;

8、根据所述至少一部分操作或事件以及所述滑动窗口检测传输数据异常节点。

9、在本专利技术的一些实施例中,所述网络包括:叶子层、汇聚层以及核心层;其中:

10、所有服务器节点连接至所述叶子层;

11、所述汇聚层用于将来自所述叶子层的流量聚集并转发到所述核心层;

12、所述核心层连接所述汇聚层中的所有交换机,用于在多个交换机中转发流量。

13、在本专利技术的一些实施例中,所述从网络中获取传输数据请求的至少一部分操作或事件,包括:

14、从所述网络中获取rdma报文;

15、按照所述传输时间的顺序解析所述rdma报文,以获取所述至少一部分操作或事件。

16、在本专利技术的一些实施例中,多个传输数据异常节点之间的通信接口为异步接口。

17、在本专利技术的一些实施例中,所述至少一部分操作或事件包括:

18、追踪id、跨度id、操作名称、开始时间、结束时间、标签、日志以及上下文。

19、在本专利技术的一些实施例中,根据所述至少一部分操作或事件以及所述滑动窗口检测传输数据异常节点,包括:

20、根据所述业务需求以及所述网络的性能生成至少一个阈值;

21、将所述追踪id、跨度id、操作名称、开始时间、结束时间、标签、日志以及上下文输入至所述滑动窗口;

22、在所述滑动窗口内,判断所述追踪id、跨度id、操作名称、开始时间、结束时间、标签、日志以及上下文与所述至少一个阈值的大小关系;

23、根据所述大小关系检测所述传输数据异常节点。

24、在本专利技术的一些实施例中,一种网络传输数据异常节点检测方法,还包括:

25、根据所述开始时间以及结束时间确定所述滑动窗口的滑动速度。

26、第二方面,本专利技术提供一种网络传输数据异常节点检测装置,该装置包括:

27、操作获取模块,用于从网络中获取传输数据请求的至少一部分操作或事件;其中,所述网络基于交换端到端传输模式连接多个服务器节点;

28、滑动窗口生成模块,用于根据业务需求以及所述网络的性能生成滑动窗口;其中,所述滑动窗口按照传输时间进行滑动;

29、异常节点检测模块,用于根据所述至少一部分操作或事件以及所述滑动窗口检测传输数据异常节点。

30、在本专利技术的一些实施例中,所述网络包括:叶子层、汇聚层以及核心层;其中:

31、所有服务器节点连接至所述叶子层;

32、所述汇聚层用于将来自所述叶子层的流量聚集并转发到所述核心层;

33、所述核心层连接所述汇聚层中的所有交换机,用于在多个交换机中转发流量。

34、在本专利技术的一些实施例中,所述操作获取模块包括:

35、rdma报文获取单元,用于从所述网络中获取rdma报文;

36、rdma报文解析单元,用于按照所述传输时间的顺序解析所述rdma报文,以获取所述至少一部分操作或事件。

37、在本专利技术的一些实施例中,多个传输数据异常节点之间的通信接口为异步接口。

38、在本专利技术的一些实施例中,所述至少一部分操作或事件包括:

39、追踪id、跨度id、操作名称、开始时间、结束时间、标签、日志以及上下文。

40、在本专利技术的一些实施例中,所述异常节点检测模块包括:

41、阈值生成单元,用于根据所述业务需求以及所述网络的性能生成至少一个阈值;

42、检测参数输入单元,用于将所述追踪id、跨度id、操作名称、开始时间、结束时间、标签、日志以及上下文输入至所述滑动窗口;

43、大小关系判断单元,用于在所述滑动窗口内,判断所述追踪id、跨度id、操作名称、开始时间、结束时间、标签、日志以及上下文与所述至少一个阈值的大小关系;

44、异常节点检测单元,用于根据所述大小关系检测所述传输数据异常节点。

45、在本专利技术的一些实施例中,一种网络传输数据异常节点检测装置,还包括:

46、滑动速度确定模块,用于根据所述开始时间以及结束时间确定所述滑动窗口的滑动速度。

47、第三方面,本专利技术提供一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现一种网络传输数据异常节点检测方法的步骤。

48、第四方面,本专利技术提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时实现网络传输数据异常节点检测方法的步骤。

49、第五方面,本专利技术提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现网络传输数据异常节点检测方法的步骤。

50、从上述描述可知,本专利技术实施例提供一种网络传输数据异常节点检测方法及装置,网络传输数据异常节点检测方法包括:首先,从网络中获取传输数据请求的至少一部分操作或事件;其中,网络基于交换端到端传输模式连接多个服务器节点;接着,根据业务需求以及网络的性能生成滑动窗口;其中,滑动窗口按照传输时间进行滑动;最后根据至少一部分操作或事件以及滑动窗口检测传输本文档来自技高网...

【技术保护点】

1.一种网络传输数据异常节点检测方法,其特征在于,包括:

2.根据权利要求1所述的网络传输数据异常节点检测方法,其特征在于,所述网络包括:叶子层、汇聚层以及核心层;其中:

3.根据权利要求1所述的网络传输数据异常节点检测方法,其特征在于,所述从网络中获取传输数据请求的至少一部分操作或事件,包括:

4.根据权利要求1所述的网络传输数据异常节点检测方法,其特征在于,多个传输数据异常节点之间的通信接口为异步接口。

5.根据权利要求1至4任一项所述的网络传输数据异常节点检测方法,其特征在于,所述至少一部分操作或事件包括:

6.根据权利要求5所述的网络传输数据异常节点检测方法,其特征在于,根据所述至少一部分操作或事件以及所述滑动窗口检测传输数据异常节点,包括:

7.根据权利要求6所述的网络传输数据异常节点检测方法,其特征在于,还包括:

8.一种网络传输数据异常节点检测装置,其特征在于,包括:

9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至7任一项所述的网络传输数据异常节点检测方法的步骤。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至7任一项所述的网络传输数据异常节点检测方法的步骤。

...

【技术特征摘要】

1.一种网络传输数据异常节点检测方法,其特征在于,包括:

2.根据权利要求1所述的网络传输数据异常节点检测方法,其特征在于,所述网络包括:叶子层、汇聚层以及核心层;其中:

3.根据权利要求1所述的网络传输数据异常节点检测方法,其特征在于,所述从网络中获取传输数据请求的至少一部分操作或事件,包括:

4.根据权利要求1所述的网络传输数据异常节点检测方法,其特征在于,多个传输数据异常节点之间的通信接口为异步接口。

5.根据权利要求1至4任一项所述的网络传输数据异常节点检测方法,其特征在于,所述至少一部分操作或事件包括:

6.根据权利要求5所述的网络传输数据异常节点...

【专利技术属性】
技术研发人员:黄镜澄王泽洋钱丹丹叶泽锐
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1