一种多源数据分析的智能监控方法及系统技术方案

一种多源数据分析的智能监控方法及系统，属于智能监控领域，其中包括：根据第一监控对象对多个数据源进行数据采集，获取多源数据集；根据多个数据源进行历史数据采集并进行分析，获得多个异常分析结果集合；基于多个异常分析结果集合设置多源监测编码规则；根据多源数据集，通过多源监测编码规则进行多源数据编码，获取数据编码结果；并确定异常数据源数量，获取异常数据源的异常值；根据异常数据源数量和异常值进行数据异常预警。本申请解决了现有技术中监控过程中存在对监控数据采集不完善、对数据的异常预警不及时和准确度不高的技术问题，达到了对多个数据源进行采集和整合，进而提高监控的准确度和对异常预警的处理效率的技术效果。的技术效果。的技术效果。

【技术实现步骤摘要】
一种多源数据分析的智能监控方法及系统


[0001]本专利技术涉及智能监控领域，具体涉及一种多源数据分析的智能监控方法及系统。

技术介绍

[0002]实时监控技术已广泛应用于各行各业，能够帮助企业和组织掌握关键业务进程，发现潜在问题，进行及时有效处理。然而，传统的监控体系通常依赖于单一数据源，难以从不同数据源采集信息，综合判断监控对象的整体状态。这容易造成监控的片面性，遗漏关键指标，导致对监控数据的异常预警不及时、准确性不高的问题。

技术实现思路

[0003]本申请通过提供了一种多源数据分析的智能监控方法及系统，旨在解决现有技术中监控过程中存在对监控数据采集不完善、对数据的异常预警不及时和准确度不高的技术问题。
[0004]鉴于上述问题，本申请实施例提供了一种多源数据分析的智能监控方法及系统。
[0005]本申请公开的第一个方面，提供了一种多源数据分析的智能监控方法，该方法包括：根据第一监控对象对多个数据源进行数据采集，获取多源数据集；根据多个数据源进行历史数据采集，根据历史数据采集结果进行数据异常分析，获得多个异常分析结果集合；基于多个异常分析结果集合设置多源监测编码规则；根据多源数据集，通过多源监测编码规则进行多源数据编码，获取数据编码结果；根据数据编码结果确定异常数据源数量，并获取异常数据源的异常值；根据异常数据源数量和异常值进行数据异常预警。
[0006]本申请公开的另一个方面，提供了一种多源数据分析的智能监控系统，该系统包括：多源数据集模块，根据第一监控对象对多个数据源进行数据采集，获取多源数据集；异常分析结果模块，根据多个数据源进行历史数据采集，根据历史数据采集结果进行数据异常分析，获得多个异常分析结果集合；编码规则设置模块，基于多个异常分析结果集合设置多源监测编码规则；数据编码结果模块，根据多源数据集，通过多源监测编码规则进行多源数据编码，获取数据编码结果；数据源异常值模块，用于根据数据编码结果确定异常数据源数量，并获取异常数据源的异常值；数据异常预警模块，根据异常数据源数量和异常值进行数据异常预警。
[0007]本申请中提供的一个或多个技术方案，至少具有如下技术效果或优点：
[0008]1.由于采用通过监控对象对多个数据源进行数据采集，获取多源数据集，并根据多源数据集获取历史数据采集结果进行数据异常分析，获得多个异常分析结果集合，针对异常分析结果制定相应编码规则进而进行预警处理的技术方案，解决了现有技术中监控过程中存在对监控数据采集不完善的技术问题，达到对多个数据源进行采集和整合的技术效果。
[0009]2.由于采用了基于多个异常分析结果集合设置多源监测编码规则，通过多源监测编码规则进行多源数据编码，获取数据编码结果并确定异常数据源数量，获取异常数据源
的异常值，再通过异常数据源数量和所述异常值进行数据异常预警的技术手段，解决了现有技术中对监控数据的异常预警不及时和准确度不高的技术问题，达到提高监控的准确度和对异常预警的处理效率的技术效果。
[0010]上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。
附图说明
[0011]图1为本申请实施例提供了一种多源数据分析的智能监控方法可能的流程示意图；
[0012]图2为本申请实施例提供了一种多源数据分析的智能监控方法中设置多源监测编码规则可能的流程示意图；
[0013]图3为本申请实施例提供了一种多源数据分析的智能监控方法中进行数据异常预警可能的流程示意图；
[0014]图4为本申请实施例提供了一种多源数据分析的智能监控系统可能的结构示意图。
[0015]附图标记说明：多源数据集模块11，异常分析结果模块12，编码规则设置模块13，数据编码结果模块14，数据源异常值模块15，数据异常预警模块16。
具体实施方式
[0016]本申请提供的技术方案总体思路如下：
[0017]本申请实施例提供了一种多源数据分析的智能监控方法及系统，根据监控对象对多个数据源进行数据采集，获取多源数据集，然后根据多个数据源进行历史数据采集，通过历史数据采集结果进行数据异常分析，获得多个异常分析结果集合。接着，基于多个异常分析结果集合设置多源监测编码规则，并根据多源数据集通过多源监测编码规则进行多源数据编码，获取数据编码结果。最后，根据异常数据源数量和异常值进行数据异常预警，全面监控多源数据，及时发现数据异常情况，提供准确的预警信息。
[0018]在介绍了本申请基本原理后，下面将结合说明书附图来具体介绍本申请的各种非限制性的实施方式。
[0019]实施例一
[0020]如图1所示，本申请实施例提供了一种多源数据分析的智能监控方法，该方法包括：
[0021]步骤S100：根据第一监控对象对多个数据源进行数据采集，获取多源数据集；
[0022]具体而言，第一监控对象是指所要进行监控的具体对象，可以是网络设备、工业设备、业务系统等，多个数据源是指与第一个监控对象相关的各种不同的数据源，包括设备日志、运维系统、传感器、数据库等，用以反映监控对象的不同状态数据。通过数据库查询、日志解析、API调用等方法获取多源数据集。其中，多源数据集是指由采集获得的数据组成的数据集，包含来自不同数据源与同一监控对象相关的数据，该数据集合包括结构化和非机构化数据，均与监控对象的状态监测相关。
[0023]通过针对第一监控对象对多个数据源进行数据采集，所得多源数据集为后续的异常检测、编码与解码提供基础数据支撑，从而判断监控对象的整体状态，实现精准的监控与预警。
[0024]步骤S200：根据所述多个数据源进行历史数据采集，根据历史数据采集结果进行数据异常分析，获得多个异常分析结果集合；
[0025]具体而言，历史数据采集是指根据多个数据源采集历史时间段内与监控对象相关的数据。根据多个数据源进行历史数据采集，需要先设定所要采集的历史监控内容，预先设置每个数据源采集的具体数据内容和格式，接着，确定历史数据时间范围，根据监控对象的业务特点、关键监控指标等确定历史数据时间范围，例如，网络设备采集历史时间超过6个月、关键业务系统1—2年等。对每个数据源在确定的历史时间范围内，以预定的采集周期重复采集数据。然后，对采集到的历史数据进行清洗，剔除无效和异常数据，对不同数据源采集的数据进行整合，转换为相同的数据格式和结构。
[0026]根据监控对象的特点选择异常检测数据，例如，统计学算法、机器学习算法等，使用历史数据训练异常检测算法，建立每个数据源的正常数据模型，模型反映数据源监控对象在正常状态下的数据分布特征。为每个数据源制定异常判断规则，如阈值界限、置信度下限等，用以判断所采集的多源数据集中是否存在异常。使用正常数据模型对每个数据源进行检测，获取每个数据源的异常分析结果，进而获得多个异常分析结果集合。<本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多源数据分析的智能监控方法，其特征在于，所述方法包括：根据第一监控对象对多个数据源进行数据采集，获取多源数据集；根据所述多个数据源进行历史数据采集，根据历史数据采集结果进行数据异常分析，获得多个异常分析结果集合；基于所述多个异常分析结果集合设置多源监测编码规则；根据所述多源数据集，通过所述多源监测编码规则进行多源数据编码，获取数据编码结果；根据所述数据编码结果确定异常数据源数量，并获取所述异常数据源的异常值；根据所述异常数据源数量和所述异常值进行数据异常预警。2.如权利要求1所述的方法，其特征在于，所述设置多源监测编码规则，包括：根据所述多个异常分析结果集合获取第一数据源对应的第一异常分析结果集合；根据第一异常分析结果集合分析所述第一数据源对应的异常数据对所述第一监控对象的异常影响程度集合；以此类推，获取所述多个数据源对应的异常数据对所述第一监控对象的多个异常影响程度集合；根据所述多个异常影响程度集合进行同等级异常程度统计分析，获取同等级异常程度数据；根据所述同等级异常程度数据进行所述多源监测编码规则的设置。3.如权利要求2所述的方法，其特征在于，所述根据所述同等级异常程度数据进行所述多源监测编码规则的设置，包括：设置正常值的正常编码值，其中，所述多个数据源对应的所述正常编码值相同，得到正常编码规则；根据所述同等级异常数据，将所述多个数据源对应的所述同等级异常数据设置相同的异常编码值，得到异常偏码规则；根据所述正常编码规则和所述异常偏码规则生成所述多源监测编码规则。4.如权利要求3所述的方法，其特征在于，所述根据所述多源数据集，通过所述多源监测编码规则进行多源数据编码，获取数据编码结果，包括：基于所述正常编码规则，获取多个数据源的正常数据范围；从所述多源数据集筛选出符合所述正常数据范围的数据，进行正常值编码；基于所述异常偏码规则，获取所述多个数据源分别对应的多...

【专利技术属性】
技术研发人员：张国强，宋晓磊，
申请(专利权)人：北京联讯星烨科技有限公司，
类型：发明
国别省市：