一种日志存储的方法、装置、电子设备及可读存储介质制造方法及图纸

技术编号:24251340 阅读:36 留言:0更新日期:2020-05-22 23:28
本发明专利技术实施例涉及计算机技术领域,公开了一种日志存储的方法、装置、电子设备及可读存储介质。本发明专利技术中日志存储的方法,包括:获取异常日志数据,异常日志数据包括:在预设时间段内采集的第一异常日志;根据异常日志数据,确定与第一异常日志关联的关联日志;将第一异常日志存储在第一数据表,将关联日志存储在第二数据表,其中,第一数据表关联第二数据表。本实施方式,使得可以快速从存储的日志中定位错误,提高错误定位的准确性以及提高定位效率。

A method, device, electronic device and readable storage medium for log storage

【技术实现步骤摘要】
一种日志存储的方法、装置、电子设备及可读存储介质
本专利技术实施例涉及计算机
,特别涉及一种日志存储的方法、装置、电子设备及可读存储介质。
技术介绍
开发人员需要了解万维网(WorldWideWeb,简称“Web”)应用在浏览器中运行异常状况,通常通过对前端埋点的方式采集前端异常日志并将采集的前端异常日志上报到日志服务器。有了前端异常日志帮助,开发人员能够快速准确定位系统异常发生原因及位置,提升错误的修复准确性与工作效率。而系统运行了一段时间后,会产生大量前端异常日志,给开发人员检索日志带来了很大困惑,无法准确寻找到发生问题对应的日志信息;针对这种情况,一般需要对日志做聚合处理。专利技术人发现相关技术中至少存在如下问题:目前的前端异常日志聚合模型中,通常只从单一角度或片面解决日志信息聚合问题,例如,聚合死板,导致很多日志不能聚合;或者缺乏对各前端异常日志之间关系的分析,导致开发人员不能快速定位错误。
技术实现思路
本专利技术实施方式的目的在于提供一种日志存储的方法、装置、电子设备及可读存储介质,使得可以快速从存储的日志中定位错误,提高错误定位的准确性以及提高定位效率。为解决上述技术问题,本专利技术的实施方式提供了一种日志存储的方法,包括:获取异常日志数据,异常日志数据包括:在预设时间段内采集的第一异常日志;根据异常日志数据,确定与第一异常日志关联的关联日志;将第一异常日志存储在第一数据表,将关联日志存储在第二数据表,其中,第一数据表关联第二数据表。本专利技术的实施方式还提供了一种日志存储的装置,包括:获取模块、确定模块和存储模块;获取模块用于获取异常日志数据,异常日志数据包括:在预设时间段内采集的第一异常日志;确定模块用于根据异常日志数据,确定与第一异常日志关联的关联日志;存储模块用于将第一异常日志存储在第一数据表,将关联日志存储在第二数据表,其中,第一数据表关联第二数据表。本专利技术的实施方式还提供了一种电子设备,包括:至少一个处理器;以及,与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行上述的日志存储的方法。本专利技术的实施方式还提供了一种计算机可读存储介质,存储有计算机程序,计算机程序被处理器执行时实现上述日志存储的方法。本专利技术实施方式相对于现有技术而言,根据获取的异常日志数据,确定与第一异常日志相关联的关联日志,将关联日志存储在第二数据表,将第一异常日志存储在第一数据表,且第一数据表和第二数据表相互关联,使得在查询异常日志过程中,不仅可以查询第一数据表中的第一异常日志,还可以通过第一数据表与第二数据表之间的关联关系查询与该第一异常日志的关联日志,由于某些错误在发生过程中往往与用户的操作存在关联关系,因而可以通过第二数据表查询关联日志,以丰富对错误定位的依据,提高快速错误定位的速度和效率;此外,由于分表存储,使得查询快速,提高查询效率。另外,根据异常日志数据,确定与第一异常日志关联的关联日志,具体包括:提取第一异常日志中的用户操作信息以及错误信息;在第一数据表中查询与用户操作信息关联且与错误信息关联的异常日志;将查询到的异常日志作为与第一异常日志关联的关联日志。第一异常日志中包括用户操作信息以及错误信息,由于某些错误的发生通常与用户的操作相关,通过查询与用户的操作信息关联的异常日志,可以较为准确地确定出关联日志,或者,将与错误信息关联的异常日志作为关联日志,可以快速地确定出关联日志。另外,在获取异常日志数据之后,日志存储的方法还包括:从第一异常日志中提取错误信息,实时构建第一异常日志的关键字模型;判断第三数据表中是否存在与第一异常日志的关键字模型相同的关键字模型,若确定存在,则更新第三数据表中关键字模型的汇总信息;若确定不存在,则将第一异常日志的关键字模型存储在第三数据表;其中,第三数据表关联第一数据表。构建关键字模型并存储关键字模型,将相同的关键字模型汇总,而第一数据表与第三数据表关联,使得还可以基于第一数据表,查询第三数据表中的关键字模型,有利于对相同错误问题的定位和分析。另外,从第一异常日志中提取错误信息,实时构建第一异常日志的关键字模型,具体包括:根据提取的错误信息,计算第一异常日志的哈希值;将错误信息以及哈希值组合,构成关键字模型。通过计算第一异常日志的哈希值,由于哈希值是基于该第一异常日志的错误信息计算,可以有效表征该第一异常日志的异常特征,将错误信息和哈希值构建该关键字模型,使得后续可以根据哈希值快速查询属于相同错误的第一异常日志。另外,判断第三数据表中是否存在与第一异常日志的关键字模型相同的关键字模型,具体包括:检测第三数据表中是否存在与第一异常日志的哈希值相同的关键字模型,若是存在,则确定第三数据表中存在与第一异常日志的关键字模型相同的关键字模型,否则,确定第三数据表中不存在与第一异常日志的关键字模型相同的关键字模型。由于每个第一异常日志的哈希值是固定的,因而可以通过在第三数据表中查找是否存在相同哈希值的关键字模型,若哈希值相同,则可以确定该第三数据表中存在与所述第一异常日志的关键字模型相同的关键字模型,另外由于第一数据表关联第二数据表,使得仅需要对第一数据表查询,即可实现对关键字模型的查询以及对关联日志的查询,从而快速查询相关日志,定位错误。另外,关键字模型的汇总信息包括:关键字模型的被记录次数;更新第三数据表中关键字模型的汇总信息,具体包括:增加第三数据表中关键字模型的汇总信息中被记录次数。另外,异常日志数据还包括:与第一异常日志关联的关联日志;根据异常日志数据,确定与第一异常日志关联的关联日志,具体包括:从异常日志数据中提取与第一异常日志关联的关联日志。异常日志数据中还包括关联日志,则可以直接对关联日志进行存储,加快存储异常日志和关联日志的速度。附图说明一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制。图1是根据本专利技术第一实施方式提供的一种日志存储的方法的具体流程示意图;图2是根据本专利技术第二实施方式提供的一种日志存储的方法的具体流程示意图;图3是根据本专利技术第三实施方式提供的一种日志存储的装置的具体结构示意图;图4是根据本专利技术第四实施方式提供的一种电子设备的具体结构示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚,下面将结合附图对本专利技术的各实施方式进行详细的阐述。然而,本领域的普通技术人员可以理解,在本专利技术各实施方式中,为了使读者更好地理解本申请而提出了许多技术细节。但是,即使没有这些技术细节和基于以下各实施方式的种种变化和修改,也可以实现本申请所要求保护的技术方案。以下各个实施例的划分是为了描述方便,不应对本专利技术的具体实现方式构成任何限定,各个实施例在不矛盾的前提下可以相互结合相互引用。专利技术人发本文档来自技高网...

【技术保护点】
1.一种日志存储的方法,其特征在于,包括:/n获取异常日志数据,所述异常日志数据包括:在预设时间段内采集的第一异常日志;/n根据所述异常日志数据,确定与所述第一异常日志关联的关联日志;/n将所述第一异常日志存储在第一数据表,将所述关联日志存储在第二数据表,其中,所述第一数据表关联所述第二数据表。/n

【技术特征摘要】
1.一种日志存储的方法,其特征在于,包括:
获取异常日志数据,所述异常日志数据包括:在预设时间段内采集的第一异常日志;
根据所述异常日志数据,确定与所述第一异常日志关联的关联日志;
将所述第一异常日志存储在第一数据表,将所述关联日志存储在第二数据表,其中,所述第一数据表关联所述第二数据表。


2.根据权利要求1所述的日志存储的方法,其特征在于,所述根据所述异常日志数据,确定与所述第一异常日志关联的关联日志,具体包括:
提取所述第一异常日志中的用户操作信息以及错误信息;
在所述第一数据表中查询与所述用户操作信息关联且与所述错误信息关联的异常日志;
将查询到的异常日志作为与所述第一异常日志关联的关联日志。


3.根据权利要求1或2所述的日志存储的方法,其特征在于,在所述获取异常日志数据之后,所述日志存储的方法还包括:
从所述第一异常日志中提取错误信息,实时构建所述第一异常日志的关键字模型;
判断第三数据表中是否存在与所述第一异常日志的关键字模型相同的关键字模型,若确定存在,则更新所述第三数据表中所述关键字模型的汇总信息;若确定不存在,则将所述第一异常日志的关键字模型存储在所述第三数据表;
其中,所述第三数据表关联第一数据表。


4.根据权利要求3所述的日志存储的方法,其特征在于,从所述第一异常日志中提取错误信息,实时构建所述第一异常日志的关键字模型,具体包括:
根据提取的所述错误信息,计算所述第一异常日志的哈希值;
将所述错误信息以及所述哈希值组合,构成所述关键字模型。


5.根据权利要求4所述日志存储的方法,其特征在于,所述判断第三数据表中是否存在与所述第一异常日志的关键字模型相同的关键字模型,具体包括:
检测所述第三数据表中是否存在与所述第...

【专利技术属性】
技术研发人员:郑国棒孔晓晨陶嫒宁懿金永承
申请(专利权)人:中移杭州信息技术有限公司中国移动通信集团有限公司
类型:发明
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1