System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本申请涉及数据处理,尤其涉及一种日志存储方法及系统。
技术介绍
1、应用日志是应用程序生成的记录性信息,它记录了应用的各种活动、事件、状态等,为管理员、开发人员和其他相关方提供了一种了解应用运行状况的途径。通过记录特定时间点发生的事情,应用日志帮助追踪应用的历史活动,提供可审计的记录,有助于故障排除、性能监控和安全分析。在互联网蓬勃发展为生活、学习、工作提供了诸多便利的同时,应用每时每刻也都在机械地产生大量的应用日志,应用日志的存储所需的物理资源也越来越多。但囿于物理存储空间限制,无法将记录的日志全量归档,通常的处理办法是通过保留近期或者固定大小的应用日志来控制其所占内存。
2、当前的应用日志存储方法通常是限定日志的存储时长或大小,比如保留近一周的日志或者限定应用日志目录的大小为10g。这种处理方法比较刻板,不能根据应用的实际情况进行灵活调整。现有的日志框架最多实现日志记录级别的人工在后台配置改变,无法对不同日志记录对象采取差异化的日志策略,难以满足控制不稳定的应用或新发版应用获得更多的日志存储需求,影响后续运维的可靠性。
技术实现思路
1、针对现有技术中的至少一个问题,本申请提出了一种日志存储方法及系统,能够提高应用日志存储的灵活性,实现应用日志的差异化和准确存储,进而提高后续运维的可靠性。
2、为了解决上述技术问题,本申请提供以下技术方案:
3、第一方面,本申请提供一种日志存储方法,包括:
4、获取目标应用对应的日志存储信息,该日
5、根据所述应用权重和有效用户数,确定所述目标应用在所述预设周期内的期望日志拉取次数;
6、根据所述实际日志拉取次数、期望日志拉取次数和存储空间基数,确定所述目标应用对应的目标日志存储空间上限,将所述目标应用的日志存储空间上限调整为所述目标日志存储空间上限,执行所述目标应用对应的应用日志存储。
7、在一个实施例中,所述的日志存储方法,还包括:
8、在发布所述目标应用的新版本时,根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,将所述目标应用的日志存储空间上限调整为所述期望日志存储空间上限,执行所述目标应用对应的应用日志存储。
9、在一个实施例中,所述根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,包括:
10、判断所述目标日志存储空间上限是否大于所述存储空间基数,若是,则将所述期望日志存储空间上限确定为所述目标日志存储空间上限。
11、在一个实施例中,所述根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,包括:
12、判断所述目标日志存储空间上限是否大于所述存储空间基数,若否,则将所述期望日志存储空间上限确定为所述存储空间基数。
13、在一个实施例中,所述的日志存储方法,还包括:
14、根据预获取的应用关联关系判断所述目标应用是否存在对应的关联应用,若是,则获取所述关联应用的日志存储空间上限;
15、将所述目标应用和所述关联应用各自的日志存储空间上限调整为所述目标应用和所述关联应用的日志存储空间上限中值最大的。
16、在一个实施例中,所述获取目标应用对应的日志存储信息,包括:
17、获取所述预设周期内访问所述目标应用的各个用户的用户信息;
18、根据每个用户的用户信息,获得该用户在预设时长内访问所述目标应用的次数;
19、将访问所述目标应用的次数大于访问次数阈值的用户确定为有效用户,并得到所述目标应用在预设周期内的有效用户数;
20、获取所述目标应用对应的应用权重、存储空间基数以及在预设周期内的实际日志拉取次数。
21、在一个实施例中,所述根据所述应用权重和有效用户数,确定所述目标应用在所述预设周期内的期望日志拉取次数,包括:
22、获取所述目标应用在多个周期的平均实际日志拉取次数;
23、判断在所述预设周期内的实际日志拉取次数与所述平均实际日志拉取次数之间的差值是否小于等于拉取次数差值阈值,若是,则根据所述应用权重和有效用户数,确定所述目标应用在所述预设周期内的期望日志拉取次数。
24、第二方面,本申请提供一种日志存储系统,包括:
25、获取装置,用于获取目标应用对应的日志存储信息,该日志存储信息包括:应用权重、存储空间基数、在预设周期内的实际日志拉取次数和有效用户数;
26、确定装置,用于根据所述应用权重和有效用户数,确定所述目标应用在所述预设周期内的期望日志拉取次数;
27、存储装置,用于根据所述实际日志拉取次数、期望日志拉取次数和存储空间基数,确定所述目标应用对应的目标日志存储空间上限,将所述目标应用的日志存储空间上限调整为所述目标日志存储空间上限,执行所述目标应用对应的应用日志存储。
28、在一个实施例中,所述的日志存储系统,还包括:
29、复位装置,用于在发布所述目标应用的新版本时,根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,将所述目标应用的日志存储空间上限调整为所述期望日志存储空间上限,执行所述目标应用对应的应用日志存储。
30、在一个实施例中,所述复位装置包括:
31、第一判断模块,用于判断所述目标日志存储空间上限是否大于所述存储空间基数,若是,则将所述期望日志存储空间上限确定为所述目标日志存储空间上限。
32、在一个实施例中,所述的复位装置,还包括:
33、第二判断模块,用于判断所述目标日志存储空间上限是否大于所述存储空间基数,若否,则将所述期望日志存储空间上限确定为所述存储空间基数。
34、在一个实施例中,所述的日志存储系统,还包括:
35、判断装置,用于根据预获取的应用关联关系判断所述目标应用是否存在对应的关联应用,若是,则获取所述关联应用的日志存储空间上限;
36、调整装置,用于将所述目标应用和所述关联应用各自的日志存储空间上限调整为所述目标应用和所述关联应用的日志存储空间上限中值最大的。
37、在一个实施例中,所述获取装置,包括:
38、第一获取模块,用于获取所述预设周期内访问所述目标应用的各个用户的用户信息;
39、获得模块,用于根据每个用户的用户信息,获得该用户在预设时长内访问所述目标应用的次数;
40、有效用户确定模块,用于将访问所述目标应用的次数大于访问次数阈值的用户确定为有效用户,并得到所述目标应用在预设周期内的有效用户数;
41、第二获取模块,用于获取所述目标应用对应的应用权重、存储空间基数以及在预设周期内的实际日志拉本文档来自技高网...
【技术保护点】
1.一种日志存储方法,其特征在于,包括:
2.根据权利要求1所述的日志存储方法,其特征在于,还包括:
3.根据权利要求2所述的日志存储方法,其特征在于,所述根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,包括:
4.根据权利要求2所述的日志存储方法,其特征在于,所述根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,包括:
5.根据权利要求1或2所述的日志存储方法,其特征在于,还包括:
6.根据权利要求1所述的日志存储方法,其特征在于,所述获取目标应用对应的日志存储信息,包括:
7.根据权利要求1所述的日志存储方法,其特征在于,所述根据所述应用权重和有效用户数,确定所述目标应用在所述预设周期内的期望日志拉取次数,包括:
8.一种日志存储系统,其特征在于,包括:
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至7任一项所述的日
10.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,所述指令被处理器执行时实现权利要求1至7任一项所述的日志存储方法。
...【技术特征摘要】
1.一种日志存储方法,其特征在于,包括:
2.根据权利要求1所述的日志存储方法,其特征在于,还包括:
3.根据权利要求2所述的日志存储方法,其特征在于,所述根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,包括:
4.根据权利要求2所述的日志存储方法,其特征在于,所述根据所述目标日志存储空间上限和所述存储空间基数,确定所述目标应用的期望日志存储空间上限,包括:
5.根据权利要求1或2所述的日志存储方法,其特征在于,还包括:
6.根据权利要求1所述的日志存储方法,其特征在于,...
【专利技术属性】
技术研发人员:黄司辉,周建平,郑培钿,李平,
申请(专利权)人:中国工商银行股份有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。