数据监控方法、装置、设备及存储介质制造方法及图纸

技术编号:39311841 阅读:8 留言:0更新日期:2023-11-12 15:57
本发明专利技术属于通信领域,公开了一种数据监控方法、装置、设备及存储介质。该方法包括:对从不同数据源获取的运维操作数据进行集中处理,获得目标运维操作数据;对目标运维操作数据进行操作异常分析,获得操作异常信息;获取目标运维操作数据的操作相似度信息;根据操作异常信息和操作相似度信息判断运维操作数据是否存在异常。由于本发明专利技术是根据运维操作数据的操作异常信息和操作相似度信息判断运维操作数据是否存在异常。相对于现有的通过运维人员定期登录系统查看操作日志判断运维操作数据是否存在异常的方式,本发明专利技术上述方式能够实现异常操作的提前发现和预警,提高数据监控效率。提高数据监控效率。提高数据监控效率。

【技术实现步骤摘要】
数据监控方法、装置、设备及存储介质


[0001]本专利技术涉及通信
,尤其涉及一种数据监控方法、装置、设备及存储介质。

技术介绍

[0002]近几年,随着云计算、微服务等技术的流行以及互联网业务的迅速发展,企业IT系统架构的规模和复杂程度逐渐增加,运维人员要关注的服务数量也呈现指数级增长。快速解决故障,降低故障率,保证系统连续稳定运行是运维的核心职责。在Gartner Group的一项调查显示,在IT项目经常出现的问题中,80%是由人员操作疏失和流程失误导致的,因为人为操作有较多的主观性和不稳定性,所以找到诱发故障的操作难度极大,如何对操作数据进行实时归档和识别,并对操作痕迹形成有效监控,及时发现异常操作已成为系统故障抢修恢复的重要参考。
[0003]上述内容仅用于辅助理解本专利技术的技术方案,并不代表承认上述内容是现有技术。

技术实现思路

[0004]本专利技术的主要目的在于提供了一种数据监控方法、装置、设备及存储介质,旨在解决现有技术通过运维人员定期登录系统查看操作日志判断运维操作数据是否存在异常导致数据监控效率低,对异常运维操作发现不及时的技术问题。
[0005]为实现上述目的,本专利技术提供了一种数据监控方法,所述方法包括以下步骤:
[0006]对从不同数据源获取的运维操作数据进行集中处理,获得目标运维操作数据;
[0007]对所述目标运维操作数据进行操作异常分析,获得操作异常信息;
[0008]获取所述目标运维操作数据的操作相似度信息;
[0009]根据所述操作异常信息和所述操作相似度信息判断所述运维操作数据是否存在异常。
[0010]可选地,所述对所述目标运维操作数据进行操作异常分析,获得操作异常信息的步骤,包括:
[0011]获取所述目标运维操作数据对应的操作字段,以及所述操作字段的操作频率;
[0012]根据所述操作频率确定所述操作字段的操作频度;
[0013]根据所述操作频度和所述操作字段对应的权重确定所述目标运维操作数据对应的操作异常信息。
[0014]可选地,所述操作异常信息包括操作异常度;
[0015]所述根据所述操作频度和所述操作字段对应的权重确定所述目标运维操作数据对应的操作异常信息的步骤,包括:
[0016]根据所述操作频度和所述操作字段对应的权重通过以下公式确定所述目标运维操作数据对应的操作异常度:
[0017][0018]其中,r用于表征操作异常度,sigmoid()用于表征激活函数,n用于表征操作字段的数量,w
i
用于表征第i个操作字段对应的权重,p
i
用于表征第i个操作字段对应的操作频度。
[0019]可选地,所述获取所述目标运维操作数据的操作相似度信息的步骤,包括:
[0020]根据所述目标运维操作数据确定多条操作之间的操作时间相似度和操作文本相似度;
[0021]根据所述操作时间相似度和所述操作文本相似度确定操作相似度信息。
[0022]可选地,所述根据所述目标运维操作数据确定多条操作之间的操作时间相似度和操作文本相似度的步骤,包括:
[0023]根据所述目标运维操作数据确定多条操作之间的操作间隔;
[0024]根据所述操作间隔确定操作时间相似度;
[0025]根据所述目标运维操作数据确定操作文本;
[0026]根据所述操作文本确定多条操作之间的操作文本相似度;
[0027]所述操作相似度信息包括操作相似度,所述根据所述操作时间相似度和所述操作文本相似度确定操作相似度信息包括:
[0028]根据所述操作时间相似度和所述操作文本相似度通过以下公式确定操作相似度:
[0029][0030]其中,s用于表征操作相似度,用于表征操作时间相似度,t1‑
t2用于表征操作之间的操作间隔,用于表征操作文本相似度,d()用于计算文本相似度,m用于表征操作字段的数量,v
ej
用于表征操作e中的第j个操作文本,v
fj
用于表征操作f中的第i个操作文本。
[0031]可选地,所述根据所述操作异常信息和所述操作相似度信息判断所述运维操作数据是否存在异常的步骤,包括:
[0032]根据所述操作异常信息确定操作异常度,并判断所述操作异常度是否大于预设异常度阈值;
[0033]在所述操作异常度大于所述预设异常度阈值时,根据所述操作相似度信息确定操作相似度;
[0034]在所述操作相似度小于预设操作相似度阈值时,判定所述运维操作数据存在异常。
[0035]可选地,所述对从不同数据源获取的运维操作数据进行集中处理,获得目标运维操作数据的步骤,包括:
[0036]获取各数据源对应的数据源适配器;
[0037]通过所述数据源适配器接收从不同数据源发送的运维操作数据;
[0038]对所述运维操作数据进行数据清洗和数据修复,获得目标运维操作数据。
[0039]此外,为实现上述目的,本专利技术还提供一种数据监控装置,所述装置包括:
[0040]处理模块,用于对从不同数据源获取的运维操作数据进行集中处理,获得目标运维操作数据;
[0041]操作异常信息确定模块,用于对所述目标运维操作数据进行操作异常分析,获得操作异常信息;
[0042]操作相似度信息确定模块,用于获取所述目标运维操作数据的操作相似度信息;
[0043]异常判断模块,用于根据所述操作异常信息和所述操作相似度信息判断所述运维操作数据是否存在异常。
[0044]此外,为实现上述目的,本专利技术还提出一种数据监控设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据监控程序,所述数据监控程序配置为实现如上文所述的数据监控方法的步骤。
[0045]此外,为实现上述目的,本专利技术还提出一种存储介质,所述存储介质上存储有数据监控程序,所述数据监控程序被处理器执行时实现如上文所述的数据监控方法的步骤。
[0046]本专利技术对从不同数据源获取的运维操作数据进行集中处理,获得目标运维操作数据;对目标运维操作数据进行操作异常分析,获得操作异常信息;获取目标运维操作数据的操作相似度信息;根据操作异常信息和操作相似度信息判断运维操作数据是否存在异常。由于本专利技术是根据运维操作数据的操作异常信息和操作相似度信息判断运维操作数据是否存在异常。相对于现有的通过运维人员定期登录系统查看操作日志判断运维操作数据是否存在异常的方式,本专利技术上述方式能够实现异常操作的提前发现和预警,提高数据监控效率。
附图说明
[0047]图1是本专利技术实施例方案涉及的硬件运行环境的数据监控设备的结构示意图;
[0048]图2为本专利技术数据监控方法第一实施例的流程示意图;
[0049]图3为本专利技术数据监控方法第二实施例的流程示意图;
[0050]图4为本专利技术数据监控方法第三实施例的流程示本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种数据监控方法,其特征在于,所述数据监控方法包括以下步骤:对从不同数据源获取的运维操作数据进行集中处理,获得目标运维操作数据;对所述目标运维操作数据进行操作异常分析,获得操作异常信息;获取所述目标运维操作数据的操作相似度信息;根据所述操作异常信息和所述操作相似度信息判断所述运维操作数据是否存在异常。2.如权利要求1所述的数据监控方法,其特征在于,所述对所述目标运维操作数据进行操作异常分析,获得操作异常信息的步骤,包括:获取所述目标运维操作数据对应的操作字段,以及所述操作字段的操作频率;根据所述操作频率确定所述操作字段的操作频度;根据所述操作频度和所述操作字段对应的权重确定所述目标运维操作数据对应的操作异常信息。3.如权利要求2所述的数据监控方法,其特征在于,所述操作异常信息包括操作异常度;所述根据所述操作频度和所述操作字段对应的权重确定所述目标运维操作数据对应的操作异常信息的步骤,包括:根据所述操作频度和所述操作字段对应的权重通过以下公式确定所述目标运维操作数据对应的操作异常度:其中,r用于表征操作异常度,sigmoid()用于表征激活函数,n用于表征操作字段的数量,w
i
用于表征第i个操作字段对应的权重,p
i
用于表征第i个操作字段对应的操作频度。4.如权利要求2所述的数据监控方法,其特征在于,所述获取所述目标运维操作数据的操作相似度信息的步骤,包括:根据所述目标运维操作数据确定多条操作之间的操作时间相似度和操作文本相似度;根据所述操作时间相似度和所述操作文本相似度确定操作相似度信息。5.如权利要求4所述的数据监控方法,其特征在于,所述根据所述目标运维操作数据确定多条操作之间的操作时间相似度和操作文本相似度的步骤,包括:根据所述目标运维操作数据确定多条操作之间的操作间隔;根据所述操作间隔确定操作时间相似度;根据所述目标运维操作数据确定操作文本;根据所述操作文本确定多条操作之间的操作文本相似度;所述操作相似度信息包括操作相似度,所述根据所述操作时间相似度和所述操作文本相似度确定操作相似度信息包括:根据所述操作时间相似度和所述操作文本相似度通...

【专利技术属性】
技术研发人员:王璇于祥兵潘宇虹张皓恒翁乐怡乔柏林吴天东郭岳
申请(专利权)人:中国移动通信集团有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1