数据处理方法、装置、设备及存储介质制造方法及图纸

技术编号:41518672 阅读:28 留言:0更新日期:2024-05-30 14:54
本申请涉及一种数据处理方法、装置、设备及存储介质,该方法获取客户端的设备注册信息;获取与网元信息对应的日志采集配置文件,日志采集配置文件包括日志减少方式;向客户端推送所日志采集配置文件和日志采集工具,日志采集工具用于采集网元的日志数据,并按照日志减少方式对日志数据进行处理得到减少后日志数据;获取客户端上报的减少后日志数据。由于向服务端推送的日志采集工具能够按照日志采集配置文件中配置的日志减少方式对日志进行处理,所以,可以使得客户端向服务端上报的减少后日志数据的数据量大大减少,提高服务端数据处理的效率。

【技术实现步骤摘要】

本申请涉及通信领域,尤其涉及一种数据处理方法、装置、设备及存储介质


技术介绍

1、设备中的业务系统在进行服务时会产生大量的服务日志数据,同时也会产生对应业务的运行状态日志数据,操作系统也会产生系统日志数据,传统的elk日志数据分析系统是在客户端使用filebeat、logstash等采集工具将所有日志数据仅进行简单过滤后全部录入服务端的elasticsearch(分布式搜索引擎)中,然后再使用kibana数据可视化系统对其中的数据进行统计展示。

2、虽然对日志数据进行了简单过滤,但是过滤后的日志数据的数据量仍然很大,所以会导致服务端处理数据的效率低。


技术实现思路

1、本申请提供了一种数据处理方法、装置、设备及存储介质,用以解决客户端对日志数据进行简单过滤,导致服务端数据处理效率低的问题。

2、第一方面,提供一种数据处理方法,应用于服务端,包括:

3、获取客户端的设备注册信息,所述设备注册信息包括部署于所述客户端的网元的网元信息;

4、获取与所述网元信息对应的本文档来自技高网...

【技术保护点】

1.一种数据处理方法,其特征在于,应用于服务端,包括:

2.根据权利要求1所述的方法,其特征在于,获取与所述网元信息对应的日志采集配置文件,包括:

3.根据权利要求1所述的方法,其特征在于,获取与所述网元信息对应的日志采集配置文件,包括:

4.根据权利要求1所述的方法,其特征在于,所述设备注册信息还包括:所述客户端所属的节点信息和/或所述客户端所处的地理位置信息;

5.一种数据处理方法,其特征在于,应用于客户端,包括:

6.根据权利要求5所述的方法,其特征在于,按照所述日志减少方式对所述网元的日志数据进行减少处理,得到减少后日志...

【技术特征摘要】

1.一种数据处理方法,其特征在于,应用于服务端,包括:

2.根据权利要求1所述的方法,其特征在于,获取与所述网元信息对应的日志采集配置文件,包括:

3.根据权利要求1所述的方法,其特征在于,获取与所述网元信息对应的日志采集配置文件,包括:

4.根据权利要求1所述的方法,其特征在于,所述设备注册信息还包括:所述客户端所属的节点信息和/或所述客户端所处的地理位置信息;

5.一种数据处理方法,其特征在于,应用于客户端,包括:

6.根据权利要求5所述的方法,其特征在于,按...

【专利技术属性】
技术研发人员:周煜
申请(专利权)人:中兴通讯股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1