一种数据处理的方法和装置制造方法及图纸

技术编号:39487375 阅读:19 留言:0更新日期:2023-11-24 11:07
本发明专利技术公开了一种数据处理的方法和装置,涉及计算机技术领域

【技术实现步骤摘要】
一种数据处理的方法和装置


[0001]本专利技术涉及计算机
,尤其涉及一种数据处理的方法和装置


技术介绍

[0002]分布式应用程序在运行过程中需要对观测数据进行收集和处理,以对分布式应用程序进行监控

相关技术中,应用程序通过输出日志来记录其运行信息,采用追踪技术收集和跟踪分布式系统交互的调用和请求,采用指标测量工具收集和聚合有关系统性能的数据

然而,上述方法适用于特定场景的数据管理和监控,不具有通用性,并且需要分别对追踪数据

日志数据和指标数据进行监控,监控效率较低


技术实现思路

[0003]有鉴于此,本专利技术实施例提供一种数据处理的方法和装置,通过
OpenTelemetry
进行部署实现的数据管道,实现了对分布式应用程序的遥测数据的收集和处理,提高了数据监控效率,并实现了对遥测数据的收集

处理和传输进行标准化和自动化的管理

[0004]为实现上述目的,根据本专利技术实施例的一个本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.
一种数据处理的方法,其特征在于,包括:获取上游服务器中应用程序的遥测数据,将所述遥测数据发送至对应的中游服务器;利用所述中游服务器对所述遥测数据进行处理,得到目标遥测数据;利用所述中游服务器将所述目标遥测数据发送至对应的下游观测端
。2.
根据权利要求1所述的方法,其特征在于,获取上游服务器中应用程序的遥测数据之前,还包括:将
OpenTelemetry SDK
集成到所述应用程序中,利用
OpenTelemetry SDK
对所述应用程序进行埋点,以获取所述遥测数据
。3.
根据权利要求1所述的方法,其特征在于,获取上游服务器中应用程序的遥测数据之前,还包括:对所述上游服务器按照
OpenTelemetry

agent
模式进行部署,以利用
agent
模式发送所述遥测数据
。4.
根据权利要求1所述的方法,其特征在于,利用所述中游服务器对所述遥测数据进行处理之前,还包括:配置用于对所述遥测数据进行处理的主机

主机集群

虚拟机或虚拟机集群,作为所述中游服务器;对所述中游服务器按照
OpenTelemetry

gateway
模式进行部署,以利用
gateway
模式发送所述遥测数据
。5.
根据权利要求1所述的方法,其特征在于,利用所述中游服务器对所述遥测数据进行处理,得到目标遥测数据,包括:根据预设关键词对所述遥测数据进行过滤处理...

【专利技术属性】
技术研发人员:高鑫
申请(专利权)人:京东科技信息技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1