【技术实现步骤摘要】
本申请涉及数据处理，特别是涉及一种工业设备监控数据处理方法、系统、设备和介质。
技术介绍
1、随着大数据时代的到来，实时数据处理技术在工业设备监控运维中越来越重要，能够快速高效的处理庞大且复杂的设备数据，同时降低设备监控系统开发复杂度，是目前工业设备智能运维的前提条件，制定设备监控数据处理标准流程则是重要技术手段。同时，随着工业自动化的快速发展，设备数据采集已成为数字化转型的重要前提，设备实时监测与数据处理已是智能运维的重要组成部分。
2、目前工业设备产生的实时数据量庞大且复杂，大多数设备监控方法在处理多种通信协议设备数据时存在一些问题，无法兼容多种设备类型，无法满足实时性与准确性的要求，缺少完整的数据处理链路，尤其在多种协议转换、时序数据处理、设备异常检测与自动化调度等诸多过程环节中存在局限性。
技术实现思路
1、基于此，有必要针对上述技术问题，提供一种能够大幅降低多种通信协议的设备数据集成与监控运维的复杂度的工业设备监控数据处理方法、系统、设备和介质。
2、一种工业设备监控数据处理方法，所述方法包括：
3、在设备源管理界面录入多个设备类型的基础信息并保存，在监控指标管理界面指定设备类型且配置多个监控指标项、设置数据采集请求接口以及协议转换规则并保存；
4、在源端采集单元中，采用设备数据源端采集模型对设备监控指标进行数据采集和标准化，并将标准化后得到的设备监控数据缓存至云端中间件，其中，所述监控指标包括设备资产、设备性能、设备割接和
5、在实时输入单元中，采用设备数据输入模型从所述云端中间件中获取所述设备监控数据，并对所述设备监控数据进行实时加载；
6、在实时转换单元中，采用设备数据转换模型对实时加载后的设备监控数据进行实时转换；
7、在实时存储单元中，采用设备数据存储模型对实时转换后的设备监控数据进行实时存储；
8、在实时上报单元中，采用设备数据上报模型根据所述设备监控数据进行实时上报，同时，还采用设备日志构建模型对设备监控数据上报详情进行日志构建及消息推送。
9、在其中一实施例中，在源端采集单元中，采用设备数据源端采集模型对设备监控指标进行数据采集的步骤之前，还包括：
10、采用实时数据处理模型将整个设备监控数据处理过程进行模块划分，划分后的组成单元包括所述源端采集单元、实时输入单元、实时存储单元以及实时上报单元。
11、在其中一实施例中，在所述设备数据源端采集模型中：
12、采用协议采集模型将从源端设备处采集的复杂结构设备监控数据转换为单层简单数据结构；
13、采用设备指标数据模型对转换后的设备监控数据进行标准化处理，得到标准化设备监控数据；
14、根据所述监控指标对所述标准化设备监控数据进行分组后，采用线程任务模型构建指标线程任务；
15、基于所述指标线程任务将所述标准化设备监控数据缓存至所述云端中间件。
16、在其中一实施例中，所述采用设备指标数据模型对转换后的设备监控数据进行标准化处理时：
17、采用设备资产数据模型以及设备性能数据模型对所述设备监控数据中设备基础特征以及设备性能特征分别进行建模，以实现数据标准化。
18、在其中一实施例中，在所述设备数据输入模型中：
19、根据所述监控指标对从所述云端中间件中获取的设备监控数据进行分解；
20、基于flink临时注册方式将分解后得到的指标数据流进行临时注册，并转换为第一临时表对象。
21、在其中一实施例中，在所设备数据转换模型中：
22、将所述设备数据输入模型注册的临时表对象转换为指标数据流；
23、采用告警分类模块对所述指标数据流进行阈值判定及告警分类，得到超严重类、严重类、一般类和恢复类对应的告警数据流；
24、采用过滤模型对所述指标数据流进行数据过滤，得到上报数据流；
25、通过临时注册方式将所述告警数据流与上报数据流注册为第二临时表对象。
26、在其中一实施例中，在所述设备数据上报模型中：
27、将所述上报数据流按照上报协议进行数据封装后，调用外部接口按照设置的上报级别以及上报方式实现数据传输及数据上报。
28、本申请还提供了一种工业设备监控数据处理系统，所述装置包括：
29、设备录入模块，用于在设备源管理界面录入多个设备类型的基础信息并保存，在监控指标管理界面指定设备类型且配置多个监控指标项、设置数据采集请求接口以及协议转换规则并保存；
30、源端采集模块，用于在源端采集单元中，采用设备数据源端采集模型对设备监控指标进行数据采集和标准化，并将标准化后得到的设备监控数据缓存至云端中间件，其中，所述监控指标包括设备资产、设备性能、设备割接和设备拓扑关系；
31、实时输入模块，用于在实时输入单元中，采用设备数据输入模型从所述云端中间件中获取所述设备监控数据，并对所述设备监控数据进行实时加载；
32、实时转换模块，用于在实时转换单元中，采用设备数据转换模型对实时加载后的设备监控数据进行实时转换；
33、实时存储模块，用于在实时存储单元中，采用设备数据存储模型对实时转换后的设备监控数据进行实时存储；
34、实时上报模块，用于在实时上报单元中，采用设备数据上报模型根据所述设备监控数据进行实时上报，同时，还采用设备日志构建模型对设备监控数据上报详情进行日志构建及消息推送。
35、一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
36、在设备源管理界面录入多个设备类型的基础信息并保存，在监控指标管理界面指定设备类型且配置多个监控指标项、设置数据采集请求接口以及协议转换规则并保存；
37、在源端采集单元中，采用设备数据源端采集模型对设备监控指标进行数据采集和标准化，并将标准化后得到的设备监控数据缓存至云端中间件，其中，所述监控指标包括设备资产、设备性能、设备割接和设备拓扑关系；
38、在实时输入单元中，采用设备数据输入模型从所述云端中间件中获取所述设备监控数据，并对所述设备监控数据进行实时加载；
39、在实时转换单元中，采用设备数据转换模型对实时加载后的设备监控数据进行实时转换；
40、在实时存储单元中，采用设备数据存储模型对实时转换后的设备监控数据进行实时存储；
41、在实时上报单元中，采用设备数据上报模型根据所述设备监控数据进行实时上报，同时，还采用设备日志构建模型对设备监控数据上报详情进行日志构建及消息推送。
42、一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：
43、在设备源管理界面录入多个设备类型的基础信息并保存，在监控指标本文档来自技高网...
【技术保护点】
1.一种工业设备监控数据处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的工业设备监控数据处理方法，其特征在于，在源端采集单元中，采用设备数据源端采集模型对设备监控指标进行数据采集的步骤之前，还包括：
3.根据权利要求2所述的工业设备监控数据处理方法，其特征在于，在所述设备数据源端采集模型中：
4.根据权利要求3所述的工业设备监控数据处理方法，其特征在于，所述采用设备指标数据模型对转换后的设备监控数据进行标准化处理时：
5.根据权利要求4所述的工业设备监控数据处理方法，其特征在于，在所述设备数据输入模型中：
6.根据权利要求4所述的工业设备监控数据处理方法，其特征在于，在所述设备数据转换模型中：
7.根据权利要求6所述的工业设备监控数据处理方法，其特征在于，在所述设备数据上报模型中：
8.一种工业设备监控数据处理系统，其特征在于，所述装置包括：
9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
...【技术特征摘要】
1.一种工业设备监控数据处理方法，其特征在于，所述方法包括：
2.根据权利要求1所述的工业设备监控数据处理方法，其特征在于，在源端采集单元中，采用设备数据源端采集模型对设备监控指标进行数据采集的步骤之前，还包括：
3.根据权利要求2所述的工业设备监控数据处理方法，其特征在于，在所述设备数据源端采集模型中：
4.根据权利要求3所述的工业设备监控数据处理方法，其特征在于，所述采用设备指标数据模型对转换后的设备监控数据进行标准化处理时：
5.根据权利要求4所述的工业设备监控数据处理方法，其特征在于，在所述设备数据输入模型中：
【专利技术属性】
技术研发人员：刘洋，贺群雄，涂平，梁春峰，曹林，张林宇，刘准，仇亚龙，李志超，彭中益，王斯政，廖佳佳，刘博，金剑，王晓辉，梁爽，
申请(专利权)人：中电工业互联网有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。