私有化日志采集方法及其系统技术方案

技术编号:41511595 阅读:18 留言:0更新日期:2024-05-30 14:50
本发明专利技术提供了一种私有化日志采集方法及其系统。其中所述方法包括:用户根据需求在管理平台选择需要查询的目标服务;判断目标服务为集中式业务服务或分布式业务服务;若为分布式业务服务,则执行:管理平台根据分布式业务服务向分布式采集器发送查询指令;分布式采集器根据查询指令扫描分布式业务服务所在节点返回业务日志列表给管理平台;管理平台对日志列表进行展示;用户在管理平台的日志列表中选择需要下载的目标日志;管理平台根据目标日志发送上传指令给分布式采集器;分布式采集器根据上传指令从分布式业务服务节点采集并上传目标日志到日志服务器;管理平台通过日志服务器下载目标日志。本发明专利技术有效实现了以最小代价换取更高日志存储效率。

【技术实现步骤摘要】

本专利技术涉及云原生kubernetes,具体地,涉及私有化日志采集方法及其系统


技术介绍

1、日志采集是维护和监控计算机系统健康的不可或缺的工具。通过详细记录系统和应用程序的运行时事件,有助于系统管理员和运维人员及时发现和解决故障、优化性能、进行安全审计以及提高系统可用性。

2、目前主要采用的日志采集方案包括elk stack、filebeat和loki。

3、elk stack(elasticsearch,logstash,kibana)是一套用于日志采集、存储和可视化的开源工具。elk stack方案使用elasticsearch作为日志存储和索引引擎,logstash作为日志收集和处理工具,kibana用于日志搜索和可视化。

4、filebeat是一个轻量级的日志采集器,用于监视指定位置的日志文件并将其转发到其他系统。filebeat方案则通过监视指定位置的日志文件,收集日志内容,并将它们转发到elasticsearch或logstash进行索引。

5、loki是一个基于标签的日志聚合工具。loki本文档来自技高网...

【技术保护点】

1.一种私有化日志采集方法,其特征在于,所述方法包括:

2.根据权利要求1所述的私有化日志采集方法,其特征在于,所述分布式采集器根据所述上传指令从所述分布式业务服务节点采集并上传所述目标日志到日志服务器的步骤具体包括:

3.根据权利要求1或2所述的私有化日志采集方法,其特征在于,每个节点对应一个所述分布式采集器,每个所述分布式采集器挂载对应所述节点的业务日志列表和系统日志列表。

4.根据权利要求1或2所述的私有化日志采集方法,其特征在于,所述分布式采集器以DaemonSet方式部署。

5.根据权利要求1或2所述的私有化日志采集方法,其特征在...

【技术特征摘要】

1.一种私有化日志采集方法,其特征在于,所述方法包括:

2.根据权利要求1所述的私有化日志采集方法,其特征在于,所述分布式采集器根据所述上传指令从所述分布式业务服务节点采集并上传所述目标日志到日志服务器的步骤具体包括:

3.根据权利要求1或2所述的私有化日志采集方法,其特征在于,每个节点对应一个所述分布式采集器,每个所述分布式采集器挂载对应所述节点的业务日志列表和系统日志列表。

4.根据权利要求1或2所述的私有化日志采集方法,其特征在于,所述分布式采集器以daemonset方式部署。

5.根据权利要求1或2所述的私有化日志采集方法,其特征在于,所述方法还包括:

6....

【专利技术属性】
技术研发人员:陈冲赵兴国
申请(专利权)人:上海赛连信息科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1