System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 一种基于带内网络遥测的遥测数据实时压缩方法和系统技术方案_技高网

一种基于带内网络遥测的遥测数据实时压缩方法和系统技术方案

技术编号:41323475 阅读:5 留言:0更新日期:2024-05-13 15:02
本发明专利技术涉及一种基于带内网络遥测的遥测数据实时压缩方法和系统,方法包括:获取网络数据包并进行解析得到数据包头、每个节点的INT数据和业务数据;判断当前是否是重解析阶段;若不是,则按照第一格式收集当前节点的网络状态数据构成当前节点的INT数据;将数据包头、每个节点的INT数据和业务数据进行逆解析构成网络数据包,将构成的网络数据包发送至当前节点的入端;若是重解析阶段,则将当前节点的INT数据解析为第二格式的网络状态数据;对当前节点的第二格式的网络状态数据进行压缩,将压缩后的网络状态数据作为当前节点的INT数据;将数据包头、每个节点的INT数据和业务数据进行逆解析构成网络数据包,发送至下一跳节点。

【技术实现步骤摘要】

本专利技术涉及带内网络遥测,尤其涉及一种基于带内网络遥测的遥测数据实时压缩方法和系统


技术介绍

1、随着互联网规模继续扩大、用户基数不断激增、业务类型趋向差异化及网络流量特征复杂等,给网络管理带来了新挑战。实时、高效、细粒度地监控网络状态,实现网络状态的深度、全面可观测,给网络测量提出了新要求。传统网络测量方式存在监测粒度粗、实时性差等问题,难以满足网络管理的需求。近年来,随着可编程数据平面的发展,带内网络遥测(in-band network telemetry,int)技术逐渐崭露头角。带内网络遥测通过交换节点在报文中插入元数据来采集网络状态,是一种随包进行网络状态获取的网络测量方法。int可以精准实现逐包、逐流、逐路径的网络状态实时监测,通过中间交换节点在用户数据包的相应位置插入元数据,实现网络状态数据收集功能,为智能网络管理提供可靠数据支撑。然而,随着网络规模的增加,数据包或网络流量经过网络节点的数量超过一定阈值时,数据包的长度会超过最大传输单元(maximum transmission unit,mtu),用于监控网络状态的数据将急剧增加,导致网络传输效率大大降低。因此,如何实时高效地进行网络状态监测,从根本上降低int测量数据上报节点数量,降低网络状态监控产生的开销,是带内网络遥测机制亟需解决的关键问题。

2、现有的带内遥测数据压缩方法需要修改交换机的编译器,重新对编译器进行编译,因此方法复杂,压缩效率低。


技术实现思路

1、鉴于上述的分析,本专利技术实施例旨在提供一种基于带内网络遥测的遥测数据实时压缩方法,用以解决现有带内遥测数据压缩复杂,压缩效率低的问题。

2、一方面,本专利技术实施例提供了一种基于带内网络遥测的遥测数据实时压缩方法,包括以下步骤:

3、获取网络数据包并进行解析得到数据包头、每个节点的int数据和业务数据;

4、判断当前是否是重解析阶段;若不是,则按照第一格式收集当前节点的网络状态数据构成当前节点的int数据;将数据包头、每个节点的int数据和业务数据进行逆解析构成网络数据包,将构成的网络数据包发送至当前节点的入端;

5、若是重解析阶段,则将当前节点的int数据解析为第二格式的网络状态数据;对当前节点的第二格式的网络状态数据进行压缩,将压缩后的网络状态数据作为当前节点的int数据;将数据包头、每个节点的int数据和业务数据进行逆解析构成网络数据包,发送至下一跳节点。

6、基于上述方法的进一步改进,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

7、根据当前节点的前一跳节点的int数据得到当前节点的前一跳节点第二格式的网络状态数据;

8、将当前节点第二格式的网络状态数据的每个分块与当前节点的前一跳节点第二格式的网络状态数据中对应的分块进行比较,采用压缩标志位记录每个分块是否相同,并将相同的分块删除;剩余的分块和压缩标志位构成当前节点压缩后的网络状态数据。

9、基于上述方法的进一步改进,将当前节点第二格式的网络状态数据的每个分块与当前节点的前一跳节点第二格式的网络状态数据对应的分块进行异或,若结果为0,则对应的压缩标志位置为0,否则置为1。

10、基于上述方法的进一步改进,根据当前节点的前一跳节点的int数据得到当前节点的前一跳节点第二格式的网络状态数据,包括:

11、对第一跳节点的int数据的每个字段进行分块,得到第一跳节点第二格式的网络状态数据;

12、若当前节点的前一跳节点不是第一跳节点,则:

13、依次以第二跳节点至当前节点的前一跳节点为当前遍历节点,根据当前遍历节点的前一跳节点第二格式的网络状态数据、当前遍历节点的int数据中的压缩标志位和分块数据还原得到当前遍历节点的第二格式的网络状态数据。

14、基于上述方法的进一步改进,根据当前遍历节点的前一跳节点第二格式的网络状态数据、当前遍历节点的int数据中的压缩标志位和分块数据还原得到当前遍历节点的第二格式的网络状态数据,包括:

15、依次遍历当前遍历节点的int数据中的每一位压缩标志位,对于第i个标志位,若为0,则取当前遍历节点的前一跳节点第二格式的网络状态数据中为第i个分块作为当前遍历节点还原后的第i个数据块;若为1,则取当前遍历节点的分块数据的最前端的一个分块作为当前遍历节点还原后的第i个数据块,并将当前遍历节点的分块数据的最前端的一个分块删除;

16、当前遍历节点还原后的数据块构成当前遍历节点的第二格式的网络状态数据。

17、基于上述方法的进一步改进,将数据包头中的ipv4包头的tos字段中的一位或ipv6包头的traffic class字段中的一位作为重解析标志位;用于当节点接收到网络数据包后根据该重解析标志位判断是否是重解析阶段。

18、基于上述方法的进一步改进,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

19、统计当前节点第二格式的网络状态数据中每种分块的频次,根据每种分块的频次构建哈夫曼树,根据构建的哈夫曼树得到每种分块的编码;

20、根据每种分块的编码对当前节点第二格式的网络状态数据进行编码,得到当前节点压缩后的网络状态数据。

21、另一方面,本专利技术实施例提供了一种基于带内网络遥测的遥测数据实时压缩系统,包括以下模块:

22、数据获取模块,用于获取网络数据包并进行解析得到数据包头、每个节点的int数据和业务数据;

23、判断模块,用于判断当前是否是重解析阶段;

24、初解析模块,用于若不是重解析阶段,则按照第一格式收集当前节点的网络状态数据构成当前节点的int数据;将数据包头、每个节点的int数据和业务数据进行逆解析构成网络数据包,将构成的网络数据包发送至当前节点的入端;

25、重解析模块,用于若是重解析阶段,则将当前节点的int数据解析为第二格式的网络状态数据;对当前节点的第二格式的网络状态数据进行压缩,将压缩后的网络状态数据作为当前节点的int数据;将数据包头、每个节点的int数据和业务数据进行逆解析构成网络数据包,发送至下一跳节点。

26、基于上述系统的进一步改进,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

27、根据当前节点的前一跳节点的int数据得到当前节点的前一跳节点第二格式的网络状态数据;

28、将当前节点第二格式的网络状态数据的每个分块与当前节点的前一跳节点第二格式的网络状态数据中对应的分块进行比较,采用压缩标志位记录每个分块是否相同,并将相同的分块删除;剩余的分块和压缩标志位构成当前节点压缩后的网络状态数据。

29、基于上述系统的进一步改进,根据当前节点的前一跳节点的int数据得到当前节点的前一跳节本文档来自技高网...

【技术保护点】

1.一种基于带内网络遥测的遥测数据实时压缩方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

3.根据权利要求2所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,将当前节点第二格式的网络状态数据的每个分块与当前节点的前一跳节点第二格式的网络状态数据对应的分块进行异或,若结果为0,则对应的压缩标志位置为0,否则置为1。

4.根据权利要求2所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,根据当前节点的前一跳节点的INT数据得到当前节点的前一跳节点第二格式的网络状态数据,包括:

5.根据权利要求4所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,根据当前遍历节点的前一跳节点第二格式的网络状态数据、当前遍历节点的INT数据中的压缩标志位和分块数据还原得到当前遍历节点的第二格式的网络状态数据,包括:

6.根据权利要求1所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,将数据包头中的IPv4包头的TOS字段中的一位或IPv6包头的Traffic Class字段中的一位作为重解析标志位;用于当节点接收到网络数据包后根据该重解析标志位判断是否是重解析阶段。

7.根据权利要求1所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

8.一种基于带内网络遥测的遥测数据实时压缩系统,其特征在于,包括以下模块:

9.根据权利要求1所述的基于带内网络遥测的遥测数据实时压缩系统,其特征在于,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

10.根据权利要求9所述的基于带内网络遥测的遥测数据实时压缩系统,其特征在于,根据当前节点的前一跳节点的INT数据得到当前节点的前一跳节点第二格式的网络状态数据,包括:

...

【技术特征摘要】

1.一种基于带内网络遥测的遥测数据实时压缩方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,所述第二格式为将第一个格式中的每个字段进行分块得到的格式;对当前节点的网络状态数据进行压缩,包括:

3.根据权利要求2所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,将当前节点第二格式的网络状态数据的每个分块与当前节点的前一跳节点第二格式的网络状态数据对应的分块进行异或,若结果为0,则对应的压缩标志位置为0,否则置为1。

4.根据权利要求2所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,根据当前节点的前一跳节点的int数据得到当前节点的前一跳节点第二格式的网络状态数据,包括:

5.根据权利要求4所述的基于带内网络遥测的遥测数据实时压缩方法,其特征在于,根据当前遍历节点的前一跳节点第二格式的网络状态数据、当前遍历节点的int数据中的压缩标志位和分块数据还原得到当前遍历节点的第二格式的网络状态数据,包...

【专利技术属性】
技术研发人员:郭阔胡明哲李旭光邵鹏志姜伟赵冬冬任智颖曹毅马豪琪袁艳敏印泰桦王唯刘佳贵
申请(专利权)人:中国兵器工业计算机应用技术研究所
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1