一种日志预处理方法、装置、设备及可读存储介质制造方法及图纸

本发明专利技术公开了一种日志预处理方法、装置、设备及可读存储介质，该方法包括：在时间戳指针指向最后一条已获取日志的情况下，获取存储系统新产生的初始日志；对初始日志进行编辑处理，得到符合推送条件的目标日志；发送目标日志给日志管理平台，并更新时间戳指针。该方法，在无需对存储系统和日志管理平台进行调整的情况下，通过对存储系统产生的初始日志进行编辑处理，能够使得日志管理平台得到更加便于处理的目标日志，能够有效提高日志管理平台的处理效率。

【技术实现步骤摘要】
一种日志预处理方法、装置、设备及可读存储介质
本专利技术涉及计算机应用
，特别是涉及一种日志预处理方法、装置、设备及可读存储介质。
技术介绍
存储系统的日志收集主要是采用人工操作方式，费时又费力。特别是当存储集群规模比较大、存储组件比较多的时候，存储系统产生的日志数量巨大，日志种类繁多，日志格式不一致，采用传统方式的日志搜集及分析方式，已经满足不了存储系统日常功能维护，系统故障、性能异常等问题定位的要求。目前，专门用于日志集中管理的日志管理平台有很多，如VMware虚拟化日志管理平台(VMwarevRealizeLogInsight)，具有强大托管功能的日志管理工具(Splunk)，均可以提供高度可扩展的异构日志管理功能，并且具有直观的数据仪表盘、完善的分析功能和友好的第三方延展性等优点。由于存储系统产生的日志是海量的，且多样的，日志管理平台处理存储系统的日志时，仍然存在处理效率低，有用日志筛选困难等问题。综上所述，如何有效地降低日志管理平台的日志处理效率等问题，是目前本领域技术人员急需解决的技术问题。专利本文档来自技高网...

【技术保护点】
1.一种日志预处理方法，其特征在于，包括：/n在时间戳指针指向最后一条已获取日志的情况下，获取存储系统新产生的初始日志；/n对所述初始日志进行编辑处理，得到符合推送条件的目标日志；/n发送所述目标日志给日志管理平台，并更新所述时间戳指针。/n

【技术特征摘要】
1.一种日志预处理方法，其特征在于，包括：
在时间戳指针指向最后一条已获取日志的情况下，获取存储系统新产生的初始日志；
对所述初始日志进行编辑处理，得到符合推送条件的目标日志；
发送所述目标日志给日志管理平台，并更新所述时间戳指针。


2.根据权利要求1所述的日志预处理方法，其特征在于，发送所述目标日志给日志管理平台，包括：
按照预设推送时间，利用表述性状态传递接口发送所述目标日志给所述日志管理平台。


3.根据权利要求1所述的日志预处理方法，其特征在于，所述推送条件为格式化日志，相应地，对所述初始日志进行编辑处理，得到符合推送条件的目标日志，包括：
对所述初始日志进行字段提取；
格式化字段提取结果，得到所述目标日志。


4.根据权利要求3所述的日志预处理方法，其特征在于，所述推送条件为字段筛选，相应地，格式化字段提取结果，得到所述目标日志，包括：
从所述字段提取结果中筛选出推送字段对应的日志信息；
组合所述日志信息，得到所述目标日志。


5.根据权利要求1所述的日志预处理方法，其特征在于，所述推送条件为推送指定模块日志，相应地，对所述初始日志进行编辑处理，得到符合推送条件的目标日志，包括：
从所述初始日志中筛选出所述指定模块对应的所述目标日志。


6.根据权利要求1所述的日志预处理方法，其特...

【专利技术属性】
技术研发人员：郭长伟，
申请(专利权)人：北京浪潮数据技术有限公司，
类型：发明
国别省市：北京;11