作业日志监控方法、装置、计算机设备和存储介质制造方法及图纸

技术编号:33966481 阅读:13 留言:0更新日期:2022-06-30 01:33
本申请涉及一种作业日志监控方法、装置、计算机设备和存储介质。方法包括:获取作业日志中心的待分析作业日志数据;待分析作业日志数据为目标作业在运行时产生的日志数据经过处理后所得到的数据;将待分析作业日志数据输入至日志分析模型,得到作业日志数据分析结果,基于作业日志数据分析结果对目标作业是否中断进行判断,得到第一判断结果;日志分析模型为多层结构的双向门控循环单元网络;若第一判断结果为所述目标作业未中断,则将待分析作业日志数据输入至报警追踪模型,得到未中断的作业日志数据分析结果对应的第二判断结果;若第二判断结果为异常报警,则针对目标作业输出异常运行数据。采用本方法能够提高监控效率,降低识别错误率。降低识别错误率。降低识别错误率。

【技术实现步骤摘要】
作业日志监控方法、装置、计算机设备和存储介质


[0001]本申请涉及人工智能
,特别是涉及一种作业日志监控方法、装置、计算机设备和存储介质。

技术介绍

[0002]随着人工智能技术的发展,出现了云技术,这个技术可以在广域网或局域网内将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的一种托管技术。
[0003]传统技术中,依靠手工半自动的传统运维方式,随着数据量的增大越来越无法满足需求。现有的日志监控并对大批量的日志进行分析时,大部分还停留在监控报错、关键词检索等被动、耗时的运维方式上,导致监控效率低下,识别错误率偏高。

技术实现思路

[0004]基于此,有必要针对上述技术问题,提供一种能够提供异常报警的基于注意力机制和神经网络的作业日志监控方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
[0005]第一方面,本申请提供了一种作业日志监控方法。所述方法包括:获取作业日志中心的待分析作业日志数据;所述待分析作业日志数据为目标作业在运行时产生的日志数据经过处理后所得到的数据;将所述待分析作业日志数据输入至日志分析模型,得到作业日志数据分析结果,基于所述作业日志数据分析结果对所述目标作业是否中断进行判断,得到第一判断结果;所述日志分析模型为多层结构的双向门控循环单元网络;若所述第一判断结果为所述目标作业未中断,则将所述待分析作业日志数据输入至报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果;若所述第二判断结果为异常报警,则针对所述目标作业输出异常运行数据。
[0006]在其中一个实施例中,所述将所述待分析作业日志数据输入至日志分析模型,得到作业日志数据分析结果,基于所述作业日志数据分析结果是否中断进行判断,得到第一判断结果,包括:获取所述目标作业对应的作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间;将所述作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间输入至所述日志分析模型,得到所述作业日志数据分析结果;基于所述作业日志数据分析结果对所述目标作业是否中断进行判断,得到所述第一判断结果。
[0007]在其中一个实施例中,所述将所述作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间输入至所述日志分析模型,得到所述作业日志数据分析结果,包括:基于所述作业名对应的日志数据记录,计算所述作业名对应的时间段的作业成功率和历史修复问题时长;基于所述日志数据记录对应的开始时间以及结束时间,得到所述日志数据记录对应的运行时长;将所述作业成功率、所述历史修复问题时长以及所述日志
数据记录对应的运行时长输入至所述日志分析模型,得到所述作业日志数据分析结果。
[0008]在其中一个实施例中,所述若所述第一判断结果为所述目标作业未中断,则将所述待分析作业日志数据输入至报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果,包括:获取所述待分析作业日志数据对应表名或者文件名,所述表名或者文件名反映对所述待分析作业日志数据承载情况;将所述待分析作业日志数据对应表名或文件名输入至所述报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果;所述第二判断结果用于表征所述目标作业是否存在异常报警。
[0009]在其中一个实施例中,所述将所述待分析作业日志数据对应表名或文件名输入至所述报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果,包括:根据所述待分析作业日志数据的表名或文件名,得到所述待分析作业日志数据对应的数据量;基于所述开始时间、所述运行时长、所述待分析作业日志数据对应的数据量以及所述环境信息输入至异常状态计算公式,得到所述未中断的作业日志数据分析结果对应的第二判断结果。
[0010]在其中一个实施例中,所述方法还包括:基于所述异常报警对应的所述目标作业输出的所述待分析作业日志数据输入至追踪算法模型,得到第三判断结果;若所述第三判断结果为异常,则更新异常运行信息表中对应的运行作业数据;所述异常运行信息表用于记录所述目标作业对应的异常信息;若所述第三判断结果为正常,则重复执行所述异常报警对应的所述目标作业输出所述待分析作业日志数据输入至追踪算法模型的步骤,并记录重复执行所述步骤的次数。
[0011]在其中一个实施例中,所述则重复执行所述异常报警对应的所述目标作业输出所述待分析作业日志数据输入至追踪算法模型,得到第四判断结果,包括:若所述次数小于预设的次数阈值,则再次针对所述目标作业输出所述待分析作业日志数据判定为异常;若所述次数大于或等于所述次数阈值,则解除目标作业对应的异常监控状态,并输出正常作业信息。
[0012]第二方面,本申请还提供了一种作业日志监控装置。所述装置包括:待分析作业日志数据获取模块,用于获取作业日志中心的待分析作业日志数据;所述待分析作业日志数据为目标作业在运行时产生的日志数据经过处理后所得到的数据;第一判断结果得到模块,用于将所述待分析作业日志数据输入至日志分析模型,得到作业日志数据分析结果,基于所述作业日志数据分析结果对所述目标作业是否中断进行判断,得到第一判断结果;所述日志分析模型为多层结构的双向门控循环单元网络;异常报警模块,用于若所述第一判断结果为所述目标作业未中断,则将所述待分析作业日志数据输入至报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果;若所述第二判断结果为异常报警,则针对所述目标作业输出异常运行数据。
[0013]在其中一个实施例中,第一判断结果得到模块,用于获取所述目标作业对应的作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间;将所述作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间输入至所述日志分析模型,得到所述作业日志数据分析结果;基于所述作业日志数据分析结果对所述目标作业是否中断进行判断,得到所述第一判断结果。
[0014]在其中一个实施例中,第一判断结果得到模块,用于基于所述作业名对应的日志
数据记录,计算所述作业名对应的时间段的作业成功率和历史修复问题时长;基于所述日志数据记录对应的开始时间以及结束时间,得到所述日志数据记录对应的运行时长;将所述作业成功率、所述历史修复问题时长以及所述日志数据记录对应的运行时长输入至所述日志分析模型,得到所述作业日志数据分析结果。
[0015]在其中一个实施例中,第二判断结果得到模块,用于获取所述待分析作业日志数据对应表名或者文件名,所述表名或者文件名反映对所述待分析作业日志数据承载情况;将所述待分析作业日志数据对应表名或文件名输入至所述报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果;所述第二判断结果用于表征所述目标作业是否存在异常报警。
[0016]在其中一个实施例中,第二判断结果得到模块,用于根据所述待分析作业日志数据的表名或文件名,得到所述待分析作业日志数据对应的数据量;基于所述开始时间、所述运行时长、所述待分析作业本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种作业日志监控方法,其特征在于,所述方法包括:获取作业日志中心的待分析作业日志数据;所述待分析作业日志数据为目标作业在运行时产生的日志数据经过处理后所得到的数据;将所述待分析作业日志数据输入至日志分析模型,得到作业日志数据分析结果,基于所述作业日志数据分析结果对所述目标作业是否中断进行判断,得到第一判断结果;所述日志分析模型为多层结构的双向门控循环单元网络;若所述第一判断结果为所述目标作业未中断,则将所述待分析作业日志数据输入至报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果;若所述第二判断结果为异常报警,则针对所述目标作业输出异常运行数据。2.根据权利要求1所述的方法,其特征在于,所述将所述待分析作业日志数据输入至日志分析模型,得到作业日志数据分析结果,基于所述作业日志数据分析结果是否中断进行判断,得到第一判断结果,包括:获取所述目标作业对应的作业名对应的日志数据记录,所述日志数据记录对应的开始时间以及结束时间;将所述作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间输入至所述日志分析模型,得到所述作业日志数据分析结果;基于所述作业日志数据分析结果对所述目标作业是否中断进行判断,得到所述第一判断结果。3.根据权利要求2所述的方法,其特征在于,所述将所述作业名对应的日志数据记录、所述日志数据记录对应的开始时间以及结束时间输入至所述日志分析模型,得到所述作业日志数据分析结果,包括:基于所述作业名对应的日志数据记录,计算所述作业名对应的时间段的作业成功率和历史修复问题时长;基于所述日志数据记录对应的开始时间以及结束时间,得到所述日志数据记录对应的运行时长;将所述作业成功率、所述历史修复问题时长以及所述日志数据记录对应的运行时长输入至所述日志分析模型,得到所述作业日志数据分析结果。4.根据权利要求1所述的方法,其特征在于,所述若所述第一判断结果为所述目标作业未中断,则将所述待分析作业日志数据输入至报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果,包括:获取所述待分析作业日志数据对应表名或者文件名,所述表名或者文件名反映对所述待分析作业日志数据承载情况;将所述待分析作业日志数据对应表名或文件名输入至所述报警追踪模型,得到所述未中断的作业日志数据分析结果对应的第二判断结果;所述第二判断结果用于表征所述目标作业是否存在异常报警。5.根据权利要求4所述的方法,其特征在于,服务器可用状态以及前项作业运行状态为环境信息;所述将所述待分析作业日志数据对应表名或文件名输入至所述报警追踪...

【专利技术属性】
技术研发人员:聂文俊石雪邱玉华徐忠民
申请(专利权)人:中国工商银行股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1