一种可观测平台及可观测数据的处理方法技术

技术编号:44103621 阅读:28 留言:0更新日期:2025-01-24 22:31
本发明专利技术公开了一种可观测平台及可观测数据的处理方法,属于网络应用领域,该平台包括:监控模块用于监控集群中资源的变更操作,并在检测到变更事件时触发预设的钩子函数;捕获模块用于定期轮询监控模块监控的资源,并确定是否采集目标资源的可观测信息,若是则激活对应的收集器;收集器用于采集目标资源的可观测信息,并根据其数据类型将其传输到OpenTelemetry相应的数据管道中;数据处理模块用于调用数据管道中对应的处理器来对可观测信息进行处理,并将处理后的可观测信息传输到输出器中;输出器用于将处理后的可观测信息导出到目标存储器或展示系统中。本申请能适应不断变化的技术和业务需求,并简化数据收集和分析的过程,提高数据的一致性和可比性。

【技术实现步骤摘要】

本专利技术涉及网络应用,尤其涉及一种可观测平台及可观测数据的处理方法


技术介绍

1、随着信息技术的发展,系统可观测性成为了确保服务稳定性和可维护性的关键因素。当前,主流的可观测系统主要依赖于三大核心数据类型:指标(metrics)、链路(traces)以及日志(logs),但缺乏统一的数据标准,因此,尽管可观测性领域中涌现了众多项目,不同系统之间产生的可观测数据却通常无法直接互通,这意味着,在不同的技术环境下收集的数据必须经过复杂的转换和解析才能被其他系统理解和利用,增加了数据处理的复杂性和成本,也使得不同企业间的可观测数据往往形成孤岛,难以进行关联分析和统一展示,降低了数据的利用价值和系统的整体效能。

2、同时,由于不同企业所使用的技术栈各不相同,包括编程语言、框架以及中间件等,又导致了可观测性工具及解决方案的高度定制化,这种多样性和异质性使得现有工具难以实现跨平台复用,并且增加了开发与运维工作的复杂度。


技术实现思路

1、本专利技术的目的在于提供一种可观测平台及可观测数据的处理方法,以解决现本文档来自技高网...

【技术保护点】

1.一种可观测平台,其特征在于,所述可观测平台基于OpenTelemetry Collector框架构建,并通过自定义资源定义的应用程序编程接口来动态配置和扩展其数据处理插件,包括:

2.根据权利要求1所述的一种可观测平台,其特征在于,所述监控模块包括获取单元和调用单元;

3.根据权利要求2所述的一种可观测平台,其特征在于,所述钩子函数包括OnChange函数、OnAdd函数和OnDelete函数。

4.根据权利要求1所述的一种可观测平台,其特征在于,所述收集器包括采集单元、转换单元和传输单元;

5.根据权利要求4所述的一种可观测平台,其特...

【技术特征摘要】

1.一种可观测平台,其特征在于,所述可观测平台基于opentelemetry collector框架构建,并通过自定义资源定义的应用程序编程接口来动态配置和扩展其数据处理插件,包括:

2.根据权利要求1所述的一种可观测平台,其特征在于,所述监控模块包括获取单元和调用单元;

3.根据权利要求2所述的一种可观测平台,其特征在于,所述钩子函数包括onchange函数、onadd函数和ondelete函数。

4.根据权利要求1所述的一种可观测平台,其特征在于,所述收集器包括采集单元、转换单元和传输单元;

5.根据权利要求4所述的一种可观测平台,其特征在于,所述收集器为多个,用于采...

【专利技术属性】
技术研发人员:韩国彪张涛
申请(专利权)人:杭州云猿生数据有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1