数据处理方法、电子设备、存储介质及程序产品技术

本发明专利技术公开了一种数据处理方法、电子设备、存储介质及程序产品。其中，数据处理方法包括：获取多个第一数据信息；对所述多个第一数据信息进行预处理，得到所述多个第一数据信息中的第二数据信息；从所述多个第一数据信息中确定多个候选数据信息；根据所述第二数据信息和所述多个候选数据信息，从所述多个候选数据信息中筛选得到目标数据信息，所述目标数据信息与所述第二数据信息具有相同的数据类型。根据本发明专利技术实施例的方案，能够在不增加电力监控系统资源配置的基础上，获得期望的目标数据信息，例如过滤出与故障强相关的日志和告警，辅助运维人员进行故障根因定位。助运维人员进行故障根因定位。助运维人员进行故障根因定位。

【技术实现步骤摘要】
数据处理方法、电子设备、存储介质及程序产品


[0001]本专利技术涉及数据处理
，尤其是一种数据处理方法、电子设备、存储介质及程序产品。

技术介绍

[0002]在电力行业的发、输、变、配、用各个环节，业界一般采用电力监控(Supervisory Control And Data Acquisition，SCADA)系统进行管理。目前，常常通过电力监控系统运行过程中产生的日志文件(例如操作日志、安全日志、系统日志等)进行故障定位分析，但是，随着电力组网日益复杂，规模日益扩大，根据日志文件分析定位故障的难度日益增加。
[0003]现有技术中，常用贝叶斯算法使用过滤时间段过滤的方法来计算出特定日志和故障间的关联关系，这对后端训练的算力处理能力要求较高，资源开销比较大。而对于告警监控来说，需要针对告警建立对应故障类型的经验库，需要业务人员投入大量经验梳理出经验库，这种人工方式除了成本耗费巨大，而且还会因为人的主观随意性导致经验库的疏漏和错误。

技术实现思路

[0004]以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。
[0005]本专利技术实施例提供了一种数据处理方法、电子设备、存储介质及程序产品，能够在不增加电力监控系统资源配置的基础上，达到快速获得期望的目标数据信息的目的。
[0006]第一方面，本专利技术实施例提供了一种数据处理方法，包括：
[0007]获取多个第一数据信息；
[0008]对所述多个第一数据信息进行预处理，得到所述多个第一数据信息中的第二数据信息；
[0009]从所述多个第一数据信息中确定多个候选数据信息；
[0010]根据所述第二数据信息和所述多个候选数据信息，从所述多个候选数据信息中筛选得到目标数据信息，所述目标数据信息与所述第二数据信息具有相同的数据类型。
[0011]第二方面，本专利技术实施例还提供了一种电子设备，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的数据处理方法。
[0012]第三方面，本专利技术实施例还提供了一种计算机可读存储介质，存储有计算机可执行指令，所述计算机可执行指令用于执行如上所述的数据处理方法。
[0013]第四方面，本专利技术实施例还提供了一种计算机程序产品，包括计算机程序或计算机指令，所述计算机程序或所述计算机指令存储在计算机可读存储介质中，计算机设备的处理器从所述计算机可读存储介质读取所述计算机程序或所述计算机指令，所述处理器执行所述计算机程序或所述计算机指令，使得所述计算机设备执行如上所述的数据处理方
法。
[0014]本专利技术实施例包括：获取多个第一数据信息，对多个第一数据信息进行预处理得到多个第一数据信息中的第二数据信息；接着从多个第一数据信息中确定多个候选数据信息，根据第二数据信息和多个候选数据信息，从多个候选数据信息中筛选得到目标数据信息，其中，目标数据信息与第二数据信息具有相同的数据类型。根据本专利技术实施例的方案，通过对多个第一数据信息进行预处理，得到多个第一数据信息中的第二数据信息，使得第二数据信息可以作为期望得到的数据信息的参考标准，接着从多个第一数据信息中确定多个候选数据信息，然后根据第二数据信息和多个候选数据信息，从多个候选数据信息中筛选出与第二数据信息具有相同的数据类型的目标数据信息，即是说，本专利技术实施例的方案，通过预先确定所期望得到的数据信息的数据类型，然后筛选出与该数据类型对应的目标数据信息，能够在不增加电力监控系统资源配置的基础上，达到快速获得期望的目标数据信息的目的。
[0015]本专利技术的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本专利技术而了解。本专利技术的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
[0016]附图用来提供对本专利技术技术方案的进一步理解，并且构成说明书的一部分，与本专利技术的实施例一起用于解释本专利技术的技术方案，并不构成对本专利技术技术方案的限制。
[0017]图1是本专利技术一个实施例提供的用于执行数据处理方法的电力监控系统架构的示意图；
[0018]图2是本专利技术一个实施例提供的数据处理装置的结构示意图；
[0019]图3是本专利技术一个实施例提供的数据处理方法的流程图；
[0020]图4是图3中步骤S320的具体方法的流程图；
[0021]图5是图4中步骤S321的一种具体方法的流程图；
[0022]图6是本专利技术一个示例提供的告警编号与告警频次对应关系的柱状图；
[0023]图7是图4中步骤S321的另一种具体方法的流程图；
[0024]图8是图6中步骤S3213的具体方法的流程图；
[0025]图9是图3中步骤S330的具体方法的流程图；
[0026]图10是图3中步骤S340的一种具体方法的流程图；
[0027]图11是图9中步骤S342的具体方法的流程图；
[0028]图12是图3中步骤S340的另一种具体方法的流程图；
[0029]图13是本专利技术一个示例提供的划分目标时间段的示意图；
[0030]图14是图11中步骤S346的具体方法的流程图；
[0031]图15是图11中步骤S348的具体方法的流程图；
[0032]图16是本专利技术一个实施例提供的电子设备的结构示意图。
具体实施方式
[0033]为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对
本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。
[0034]需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于流程图中的顺序执行所示出或描述的步骤。说明书和权利要求书及上述附图的描述中，多个(或多项)的含义是两个以上，大于、小于、超过等理解为不包括本数，以上、以下、以内等理解为包括本数。如果有描述到“第一”、“第二”等只是用于区分技术特征为目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量或者隐含指明所指示的技术特征的先后关系。
[0035]本专利技术提供了一种数据处理方法、电子设备、存储介质及程序产品，先通过对多个第一数据信息进行预处理，得到多个第一数据信息中的第二数据信息，接着又从多个第一数据信息中确定多个候选数据信息，然后根据第二数据信息和多个候选数据信息，从多个候选数据信息中筛选出与第二数据信息具有相同的数据类型的目标数据信息，因此，能够在不增加电力监控系统资源配置的基础上，达到快速获得期望的目标数据信息的目的。
[0036]下面结合附图，对本专利技术实施例作进一步阐述。
[0037]如图1所示，图1是本专利技术一个实施例提供的用于执行数据处理方法的电力监控系统架构的示意图。在图1的示例中，该电力监控系统架构包括系统层100、通讯层20本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种数据处理方法，包括：获取多个第一数据信息；对所述多个第一数据信息进行预处理，得到所述多个第一数据信息中的第二数据信息；从所述多个第一数据信息中确定多个候选数据信息；根据所述第二数据信息和所述多个候选数据信息，从所述多个候选数据信息中筛选得到目标数据信息，所述目标数据信息与所述第二数据信息具有相同的数据类型。2.根据权利要求1所述的数据处理方法，其特征在于，所述对所述多个第一数据信息进行预处理，得到所述多个第一数据信息中的第二数据信息，包括：对所述多个第一数据信息进行基于频次的聚类处理，得到多个聚类集合，不同的所述聚类集合具有不同的中心频次；从所述多个聚类集合中确定中心频次小于或等于频次阈值的目标聚类集合，得到第二数据信息。3.根据权利要求2所述的数据处理方法，其特征在于，所述第一数据信息包括告警信息，所述告警信息具有告警编号；所述对所述多个第一数据信息进行基于频次的聚类处理，得到多个聚类集合，包括：根据所述告警编号对所述告警信息进行频次统计，得到所述告警信息的告警频次；根据所述告警频次对所有所述告警信息进行聚类处理，得到多个聚类集合。4.根据权利要求2所述的数据处理方法，其特征在于，所述第一数据信息包括日志信息；所述对所述多个第一数据信息进行基于频次的聚类处理，得到多个聚类集合，包括：对所述日志信息进行频次统计，得到所述日志信息的日志频次；根据所述日志频次对所有所述日志信息进行聚类处理，得到多个聚类集合。5.根据权利要求4所述的数据处理方法，其特征在于，所述对所述日志信息进行频次统计，得到所述日志信息的日志频次，包括：对所述日志信息进行变量替换处理，得到备选信息；对所述备选信息进行映射处理，得到映射信息；根据所述映射信息对所述日志信息进行频次统计，得到所述日志信息的日志频次。6.根据权利要求1所述的数据处理方法，其特征在于，所述从所述多个第一数据信息中确定多个候选数据信息，包括：确定目标时间段；从所述多个第一数据信息中确定处于所述目标时间段内的多个候选数据信息。7.根据权利要求6所述的数据处理方法，其特征在于，所述根据所述第二数据信息和所述多个候选数据信息，从所述多个候选数据信息中筛选得到目标数据信息，包括：根据预设时间长度对所述目标时间段进行划分处理，得到两个以上的过滤时间段；对所述两个以上的过滤时间段中的所述候选数据信息分别进行筛选处理，得到每个所述过滤时间段的第一信息集合；对每个所述过滤时间段的所述第一信息集合分别进行去重处理，得到每个所述过滤时间段的第二信息集合；获取所有所述第二信息集合的并集，得到目标数据信息。
8.根据权利要求7所述的数据处理方法，其特征在于，所述对所述两个以上的过滤时间段中的所述候选数据信息分别进行筛选处理，得到每个所述过...

【专利技术属性】
技术研发人员：戴新宇，
申请(专利权)人：中兴通讯股份有限公司，
类型：发明
国别省市：