数据管理方法、系统、电子设备及存储介质技术方案

本发明专利技术实施例涉及数据处理领域，公开了一种数据管理方法、系统、电子设备及存储介质。本发明专利技术实施例中的数据管理方法应用于存储设备，包括：接收流控设备分发的数据；其中，数据由流控设备从多条输入链路获取，根据多条输入链路的流量大小和预先获取的各存储设备的存储性能参数，将每条输入链路的输入数据动态分发至多个存储设备；将数据分类为寻呼数据和非寻呼数据；将寻呼数据过滤存储，将非寻呼数据存储至预先打开的存储文件中。本发明专利技术实施例中的数据管理方法，可以降低存储成本。可以降低存储成本。可以降低存储成本。

【技术实现步骤摘要】
数据管理方法、系统、电子设备及存储介质


[0001]本申请实施例涉及数据处理领域，特别涉及一种数据管理方法、系统、电子设备及存储介质。

技术介绍

[0002]随着5G时代的到来，运营商的移动网络的部署规模与复杂程度越来越高，运维与参数调优成本越来越高。通过深度报文检测(Deep Packet Inspection，简称“DPI”)技术对移动网络中核心网与接入网中网元的间的交互信令进行分析，输出描述网元间交互的DPI数据(或信令数据)。同时针对网络优化、用户投诉等众多网络诊断需求，往往需要回溯到网元之间的信令交互，因此对DPI设备输出的DPI数据进行保存是非常必要的。
[0003]然而，随着网络规模的扩大，DPI设备输出的DPI数据的流量逐步增加，从而存储DPI数据的存储设备要求有较高的存储性能，导致存储DPI数据需要较高的存储成本。

技术实现思路

[0004]本申请实施例的主要目的在于提出一种数据管理方法、系统、电子设备及存储介质，可以实现降低存储成本。
[0005]为实现上述目的，本申请实施例提供了一种数据管理本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据管理方法，其特征在于，应用于存储设备，包括：接收流控设备分发的数据；其中，所述数据由所述流控设备从多条输入链路获取，根据多条所述输入链路的流量大小和预先获取的各所述存储设备的存储性能参数，将每条输入链路的输入数据动态分发至多个所述存储设备；将所述数据分类为寻呼数据和非寻呼数据；将所述寻呼数据过滤存储，将所述非寻呼数据存储至预先打开的存储文件中。2.根据权利要求1所述的数据管理方法，其特征在于，所述寻呼数据包括完整寻呼数据组和超时寻呼数据组，所述完整寻呼数据组包括多条请求数据和一条响应数据，所述响应数据与多条所述请求数据中的其中一条匹配，所述超时寻呼数据组包括多条超时请求数据，所述超时请求数据不与任何响应数据匹配；所述将所述寻呼数据过滤存储，包括：存储所述完整寻呼数据组中的所述响应数据，以及与所述响应数据匹配的请求数据，过滤所述完整寻呼数据组中的其他请求数据；直接存储所述超时寻呼数据组。3.根据权利要求1或2所述的数据管理方法，其特征在于，所述将所述非寻呼数据存储至预先打开的存储文件中，包括：按非寻呼数据序列顺序读取所述非寻呼数据头部的时间戳，根据所述时间戳，获取与非寻呼数据序列对应的存储文件序列；通过时域滑窗管理所述存储文件序列，将位于所述时域滑窗的窗口内的存储文件预先打开，在窗口时间内，将所述非寻呼数据写入对应的存储文件。4.根据权利要求3所述的数据管理方法，其特征在于，所述时域滑窗包括临界区，位于所述临界区内的存储文件被禁止写入；所述在窗口时间内，将所述非寻呼数据写入对应的存储文件，包括：若所述窗口中不存在与所述非寻呼数据对应的存储文件，或者，与所述非寻呼数据对应的存储文件位于所述临界区，则将此非寻呼数据预存为超时窗口数据；在所述在窗口时间内，将所述非寻呼数据写入对应的存储文件后，所述方法还包括：判断是否存在所述超时窗口数据；若存在，则获取所述超时窗口数据对应的第一存储文件；判断文件管理容器中是否存在所述第一存储文件；其中，所述文件管理容器用于控制窗口中的存储文件在预设时长内保持打开状态；若所述文件管理容器中不存在所述第一存储文件，则打开所述第一存储文件，将所述超时窗口数据写入所述第一存储文件，并将所述第一存储文件存入所述文件管理容器中，根据所述预设时长计算所述第一存储文件的关闭时间；若所述文件管理容器中存在所述第一存储文件，则直接将所述超时窗口数据写入所述第一存储文件，并根据所述预设时长更新所述第一存储文件的关闭时间。5.一种数据管理方法，其特征在于，应用于流控设备，包括：从多条输入链路获取输入数据；根据多条所述输入...

【专利技术属性】
技术研发人员：付林舟，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：