一种基于DPDK的网络数据处理方法和装置制造方法及图纸

本发明专利技术实施例提供了一种基于DPDK的网络数据处理方法和装置，通过DPDK发送预设结构体的网络数据，预设结构体为Mbuf数据结构体，接着获取Mbuf数据结构体中预设的功能区域，其中，功能区域具有追踪控制节点和若干个采集节点，追踪控制节点具有一状态标识，当追踪控制节点处于启动状态时，根据采集节点采集的网络数据，生成日志数据，然后根据日志数据，生成针对网络数据的处理路径，从而通过以预设结构体的方式进行网络数据的传输，结合预设结构体的特性，将数据处理的路径记录在预设结构体的功能区域中，可以实现对数据的追踪，极大地简化了传输数据的分析过程，提高了网络数据问题的处理效率。

A dpdk based network data processing method and device

【技术实现步骤摘要】
一种基于DPDK的网络数据处理方法和装置
本专利技术涉及数据处理
，特别是涉及一种基于DPDK的网络数据处理方法和一种基于DPDK的网络数据处理装置。
技术介绍
在正常传输具有大量各种业务数据组网的环境里，对其中一个数据进行跟踪是非常费时且复杂的流程操作。需要一个全局的计数器结构分类统计，会涉及多个函数和功能节点、还可能跨进程，因此，如何合理的规划、进行追踪的方式一直是一个繁琐的过程。对于传统的传输网络数据传输的流程，是在数据入口或数据出口处通过交换设备镜像抓包或遍布于软件处理流程中的统计进行分析。对于捕获数据的分析，需要能够使用专业工具和具备数据网络知识才能的人员对结果数据进行筛选，并结合计数器对基于DPDK的网络数据处理流程进行研判。然而，上述网络数据传输需要对海量的原始数据进行筛选，并进行软件处理过程计数器比对，当需要提高问题分析效率时，需要不断增加技术器，扩展性差，且需要专业人员耗费较多的时间进行分析定位，导致网络数据传输问题处理的效率低下。
技术实现思路
本专利技术实施例是提供一种基于DPDK的网络数据处理方法，以解决在对网络数据进行追踪时，需要进行海量数据的筛选，数据分析效率低的问题。相应的，本专利技术实施例还提供了一种基于DPDK的网络数据处理装置，用以保证上述方法的实现及应用。为了解决上述问题，本专利技术实施例公开了一种基于DPDK的网络数据处理方法，包括：通过所述DPDK发送预设结构体的网络数据，所述预设结构体为Mbuf数据结构体；<br>获取所述Mbuf数据结构体中预设的功能区域，所述功能区域具有追踪控制节点和若干个采集节点，所述追踪控制节点具有一状态标识；当所述追踪控制节点处于启动状态时，根据所述采集节点采集的网络数据，生成日志数据；根据所述日志数据，生成针对所述网络数据的处理路径。可选的，所述当所述追踪控制节点处于启动状态时，根据所述采集节点采集的网络数据，生成日志数据，包括：获取所述网络数据处理节点的域位置；通过所述采集节点采用所述域位置，生成置位信息；当所述网络数据从所述功能区域交出时，通过所述追踪控制节点采用所述置位信息，生成所述日志数据。可选的，所述功能区域还具有展示控制节点，所述展示控制节点具有一状态标识，所述方法还包括：当所述展示控制节点处于启动状态时，通过所述展示控制节点获取与所述置位信息适配的痕迹信息，并展示所述痕迹信息，所述痕迹信息包括源IP、目的IP、协议号以及长度中的至少一种。可选的，所述根据所述日志数据，生成针对所述网络数据的处理路径，包括：获取所述采集节点与所述功能区域之间的映射关系，所述映射关系包括所述采集节点的先后顺序；采用所述日志数据以及所述映射关系，生成针对所述网络数据的路径信息。本专利技术实施例还公开了一种基于DPDK的网络数据处理装置，包括：数据发送模块，用于通过所述DPDK发送预设结构体的网络数据，所述预设结构体为Mbuf数据结构体；功能区域获取模块，用于获取所述Mbuf数据结构体中预设的功能区域，所述功能区域具有追踪控制节点和若干个采集节点，所述追踪控制节点具有一状态标识；日志数据生成模块，用于当所述追踪控制节点处于启动状态时，根据所述采集节点采集的网络数据，生成日志数据；数据处理模块，用于根据所述日志数据，生成针对所述网络数据的处理路径。可选的，所述日志数据生成模块包括：域位置获取子模块，用于获取所述网络数据处理节点的域位置；置位信息生成子模块，用于通过所述采集节点采用所述域位置，生成置位信息；日志生成子模块，用于当所述网络数据从所述功能区域交出时，通过所述追踪控制节点采用所述置位信息，生成所述日志数据。可选的，所述功能区域还具有展示控制节点，所述展示控制节点具有一状态标识，所述装置还包括：数据展示模块，用于当所述展示控制节点处于启动状态时，通过所述展示控制节点获取与所述置位信息适配的痕迹信息，并展示所述痕迹信息，所述痕迹信息包括源IP、目的IP、协议号以及长度中的至少一种。可选的，所述数据处理模块包括：映射关系获取子模块，用于获取所述采集节点与所述功能区域之间的映射关系，所述映射关系包括所述采集节点的先后顺序；路径信息生成子模块，用于采用所述日志数据以及所述映射关系，生成针对所述网络数据的路径信息。本专利技术实施例还公开了一种装置，包括：一个或多个处理器；和其上存储有指令的一个或多个机器可读介质，当由所述一个或多个处理器执行时，使得所述装置执行如上所述的一个或多个的方法。本专利技术实施例还公开了一个或多个机器可读介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行如上所述的一个或多个的方法。本专利技术实施例包括以下优点：在本专利技术实施例中，通过DPDK发送预设结构体的网络数据，预设结构体为Mbuf数据结构体，接着获取Mbuf数据结构体中预设的功能区域，其中，功能区域具有追踪控制节点和若干个采集节点，追踪控制节点具有一状态标识，当追踪控制节点处于启动状态时，根据采集节点采集的网络数据，生成日志数据，然后根据日志数据，生成针对网络数据的处理路径，从而通过以预设结构体的方式进行网络数据的传输，结合预设结构体的特性，将数据处理的路径记录在预设结构体的功能区域中，可以实现对数据的追踪，极大地简化了传输数据的分析过程，提高了网络数据问题的处理效率。附图说明图1是本专利技术的一种基于DPDK的网络数据处理方法实施例的步骤流程图；图2是本专利技术的一种基于DPDK的网络数据处理方法实施例提供的Mbuf数据结构体的示意图；图3是本专利技术的一种基于DPDK的网络数据处理装置实施例的结构框图。具体实施方式为使本专利技术的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本专利技术作进一步详细的说明。参照图1，示出了本专利技术的一种基于DPDK的网络数据处理方法实施例的步骤流程图，具体可以包括如下步骤：步骤101，通过DPDK发送预设结构体的网络数据，预设结构体为Mbuf数据结构体；对于网络设备，如路由器、交换机、媒体网关、SBC、PS网关等，往往需要在瞬间进行大量的报文收发，因此，在传统的网络设备上，可以看到配置了专门的NP(NetworkProcess，网络处理)处理器，或FPGA(Field－ProgrammableGateArray，现场可编程门阵列)，或ASIC(ApplicationSpecificIntegratedCircuit，特定应用集成电路)等。这些专用器件通过内置的硬件电路(或通过编程形成的硬件电路)高效转发报文，当需要对报文进行深度处理的时候才需要CPU干涉。对于公有云、NFV(NetworkFunctionVirtualization，网络功能虚拟化)等应用场景，基础设施以cpu为运算核心，往往不本文档来自技高网...

【技术保护点】
1.一种基于DPDK的网络数据处理方法，其特征在于，包括：/n通过所述DPDK发送预设结构体的网络数据，所述预设结构体为Mbuf数据结构体；/n获取所述Mbuf数据结构体中预设的功能区域，所述功能区域具有追踪控制节点和若干个采集节点，所述追踪控制节点具有一状态标识；/n当所述追踪控制节点处于启动状态时，根据所述采集节点采集的网络数据，生成日志数据；/n根据所述日志数据，生成针对所述网络数据的处理路径。/n

【技术特征摘要】
1.一种基于DPDK的网络数据处理方法，其特征在于，包括：
通过所述DPDK发送预设结构体的网络数据，所述预设结构体为Mbuf数据结构体；
获取所述Mbuf数据结构体中预设的功能区域，所述功能区域具有追踪控制节点和若干个采集节点，所述追踪控制节点具有一状态标识；
当所述追踪控制节点处于启动状态时，根据所述采集节点采集的网络数据，生成日志数据；
根据所述日志数据，生成针对所述网络数据的处理路径。


2.根据权利要求1所述的方法，其特征在于，所述当所述追踪控制节点处于启动状态时，根据所述采集节点采集的网络数据，生成日志数据，包括：
获取所述网络数据处理节点的域位置；
通过所述采集节点采用所述域位置，生成置位信息；
当所述网络数据从所述功能区域交出时，通过所述追踪控制节点采用所述置位信息，生成所述日志数据。


3.根据权利要求2所述的方法，其特征在于，所述功能区域还具有展示控制节点，所述展示控制节点具有一状态标识，所述方法还包括：
当所述展示控制节点处于启动状态时，通过所述展示控制节点获取与所述置位信息适配的痕迹信息，并展示所述痕迹信息，所述痕迹信息包括源IP、目的IP、协议号以及长度中的至少一种。


4.根据权利要求1所述的方法，其特征在于，所述根据所述日志数据，生成针对所述网络数据的处理路径，包括：
获取所述采集节点与所述功能区域之间的映射关系，所述映射关系包括所述采集节点的先后顺序；
采用所述日志数据以及所述映射关系，生成针对所述网络数据的路径信息。


5.一种基于DPDK的网络数据处理装置，其特征在于，包括：
数据发送模块，用于通过所述DPDK发送预设结构体的网络数据，所述预设结构体为Mbuf数据结构体；
功能区域获取模块，用于获取所述Mbuf数据结构体中预设的功能...

【专利技术属性】
技术研发人员：陈魁，刘鸿鹏，
申请(专利权)人：大唐移动通信设备有限公司，
类型：发明
国别省市：北京;11