数据处理方法、装置、系统及存储介质制造方法及图纸

技术编号:19342340 阅读:48 留言:0更新日期:2018-11-07 13:57
本申请实施例提供一种数据处理方法、装置、系统及存储介质;所述数据处理方法包括:与数据处理设备进行长连接,并获取所述数据处理设备的多个解析数据方式;从所述多个解析数据方式中确定出目标解析数据方式;将所述目标解析数据方式对应的解析标识发送给所述数据处理设备;接收所述数据处理设备发送的目标日志信息,所述目标日志信息为所述数据处理设备将其采集到的日志信息根据所述解析标识解析后的日志信息。可以实时控制数据处理设备,并让不同的数据处理设备按照统一的解析数据方式解析日志信息并上传服务器。

Data processing method, device, system and storage medium

The embodiment of this application provides a data processing method, device, system and storage medium. The data processing method includes: long connection with the data processing device and acquisition of multiple analytical data modes of the data processing device; determination of the target analytical data mode from the plurality of analytical data modes; and determination of the target analytical data mode from the plurality of analytical data modes; The analytic identification corresponding to the target analytic data mode is sent to the data processing device, and the target log information transmitted by the data processing device is received. The target log information is the log information collected by the data processing device and parsed according to the analytic identification. Data processing equipment can be controlled in real time, and different data processing equipment can parse log information and upload server in a unified way of parsing data.

【技术实现步骤摘要】
数据处理方法、装置、系统及存储介质
本申请涉及数据处理
,特别涉及一种数据处理方法、装置、系统及存储介质。
技术介绍
随着电子技术的快速发展,诸如智能手机等电子设备的功能越来越多。例如,用户可以选择电子设备的网络连接模式、待机模式等,用户也可以使用电子设备上的各种应用来实现不同的功能。在用户使用电子设备的过程中,经常需要对电子设备发出各种指令。而用户通常需要从电子设备的系统菜单或者电子设备上安装的应用的设置菜单中来选择所需的指令。这种选择指令的方式操作繁琐,效率低。随着大数据技术的发展,纯粹的将原始数据收集到系统已经远远不能满足大数据分析的要求,现在的大数据平台,更加要求收集器上传的数据是标注了固定格式的。举例来说,对于一条日志“[info]2018/12/23,小明:你好。”,可以看到这条日志由实际上可以简单分四部分,每一部分所表达的含义都不同。第一部分在中括号中,表示日志的级别,第二部分是一个日期,第三部分表示说话的人,第四部分表示说话的内容,那么大数据平台更希望接受到的数据是按照格式说明好这四部分分别是什么,然后再传输上来,并去掉没用的符号,解析识别后的内容类似如下。级别本文档来自技高网...

【技术保护点】
1.一种数据处理方法,其特征在于,包括:与数据处理设备进行长连接,并获取所述数据处理设备的多个解析数据方式;从所述多个解析数据方式中确定出目标解析数据方式;将所述目标解析数据方式对应的解析标识发送给所述数据处理设备;接收所述数据处理设备发送的目标日志信息,所述目标日志信息为所述数据处理设备将其采集到的日志信息根据所述解析标识解析后的日志信息。

【技术特征摘要】
1.一种数据处理方法,其特征在于,包括:与数据处理设备进行长连接,并获取所述数据处理设备的多个解析数据方式;从所述多个解析数据方式中确定出目标解析数据方式;将所述目标解析数据方式对应的解析标识发送给所述数据处理设备;接收所述数据处理设备发送的目标日志信息,所述目标日志信息为所述数据处理设备将其采集到的日志信息根据所述解析标识解析后的日志信息。2.根据权利要求1所述的数据处理方法,其特征在于,所述接收所述数据处理设备发送的目标日志信息的步骤之前,还包括:获取所述数据处理设备的多个数据转换方式;从所述多个数据转换方式中确定出目标数据转换方式;将所述数据转换方式对应的转换标识发送给所述数据处理设备;所述接收所述数据处理设备发送的目标日志信息,所述目标日志信息为所述数据处理设备将其采集到的日志信息根据所述解析标识解析后的日志信息的步骤,包括:接收所述数据处理设备发送的目标日志信息,所述目标日志信息为所述数据处理设备将其采集到的日志信息根据所述解析标识解析和根据转换标识转换后的日志信息。3.根据权利要求1所述的数据处理方法,其特征在于,所述接收所述数据处理设备发送的目标日志信息的步骤之前,还包括:获取所述数据处理设备的多个数据发送方式;从所述多个数据发送方式中确定出目标数据发送方式;所述接收所述数据处理设备发送的目标日志信息的步骤,包括:接收所述数据处理设备根据所述目标数据发送方式发送的目标日志信息。4.根据权利要求1所述的数据处理方法,其特征在于,将所述目标解析数据方式对应的解析标识发送给所述数据处理设备时,生成控制任务;接收所述数据处理设备发送的目标日志信息的步骤之后,还包括:所述控制任务将所述目标日志信息展示。5.根据权利要求4所述的数据处理方法,其特征在于,还包括:实时接收所述数据处理设备发送的目标日志信息,并将所述目标日志信息存储在数据库中;通过所述控制任务轮询所述数据库;当所述数据库中增加新的目标日志信息时,获取新的目标日志信息;将所述新的目标日志信息展示。6.一种数据处理方法,应用于数据处理设备,其特征在于,所述方法包括:与服务器进行长连接,并接收所述服务器发送的配置信...

【专利技术属性】
技术研发人员:孙健波陈超
申请(专利权)人:上海七牛信息技术有限公司
类型:发明
国别省市:上海,31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1