一种插件化的融合CDN日志文件处理方法及系统技术方案

技术编号:43433021 阅读:16 留言:0更新日期:2024-11-27 12:42
本发明专利技术公开了一种插件化的融合CDN日志文件处理方法及系统,涉及日志处理技术领域。该方法包括:配置多个不同CDN服务厂商的日志输入源信息、日志格式解析规则和处理流程以及日志存储信息,生成并管理配置文件;根据配置文件中的日志输入源信息从对应的日志输入源获取日志文件;根据配置文件中的日志格式解析规则,对日志文件进行字段提取和数据转换,以得到解析后的日志文件;根据配置的日志存储信息将解析后的日志文件存储至对应的不同的存储系统中。本发明专利技术可在配置文件中配置每个服务厂商的日志格式解析和处理流程,允许用户根据实际需求自由扩展和定制日志内容,提高系统的灵活性和可维护性。

【技术实现步骤摘要】

本专利技术涉及日志处理,具体而言,涉及一种插件化的融合cdn日志文件处理方法及系统。


技术介绍

1、cdn(content delivery network,内容分发网络)是一种用于加速互联网内容传输的基础网络设施,相比传统cdn网络加速,融合cdn使用统一的技术支持接口协调国内外主流cdn服务商,选择最优的cdn节点服务客户,并通过统一管理、监控和运维管理门户,实现统一计费模型、费用结算和统一的服务质量保证。融合cdn的核心是同时使用多个cdn服务厂商,通过全局智能调度系统将用户请求调度到最优的服务节点,从而实现更好的网络加速效果。

2、然而,不同的cdn服务厂商通常会采用完全不同的用户访问日志,如何快速高效灵活地处理各个cdn服务厂商的海量日志文件,这对日志系统的可靠性、可扩展性具有非常大的挑战。传统的处理方法通常是按照每个cdn厂商的固定的方式来解析日志文件内容,缺乏灵活的扩展能力,难以应对业务需求的快速调整和升级。


技术实现思路

1、为了克服上述问题或者至少部分地解决上述问题,本专利技术提本文档来自技高网...

【技术保护点】

1.一种插件化的融合CDN日志文件处理方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种插件化的融合CDN日志文件处理方法,其特征在于,所述管理配置文件的方法包括以下步骤:

3.根据权利要求1所述的一种插件化的融合CDN日志文件处理方法,其特征在于,所述根据配置文件中的日志输入源信息从对应的日志输入源获取日志文件的方法包括以下步骤:

4.根据权利要求3所述的一种插件化的融合CDN日志文件处理方法,其特征在于,还包括以下步骤:

5.根据权利要求4所述的一种插件化的融合CDN日志文件处理方法,其特征在于,还包括以下步骤:

...

【技术特征摘要】

1.一种插件化的融合cdn日志文件处理方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的一种插件化的融合cdn日志文件处理方法,其特征在于,所述管理配置文件的方法包括以下步骤:

3.根据权利要求1所述的一种插件化的融合cdn日志文件处理方法,其特征在于,所述根据配置文件中的日志输入源信息从对应的日志输入源获取日志文件的方法包括以下步骤:

4.根据权利要求3所述的一种插件化的融合cdn日志文件处理方法,其特征在于,还包括以下步骤:

5.根据权利要求4所述的一种插件化的融合cdn日志文件处理方法,其特征在于,还包括以下步骤:

6.根据权利要求4所述的一种插件化的融合cdn日志文件处理方法,其特...

【专利技术属性】
技术研发人员:陈连波余杰蔡辉翔林佳乐史憬烨王声楚吴成龙吴剑林张德成
申请(专利权)人:厦门市安杰云网络有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1