一种基于物联网的数据处理方法技术

本申请实施例公开了一种基于物联网的数据处理方法

【技术实现步骤摘要】
一种基于物联网的数据处理方法、装置、设备及存储介质


[0001]本申请涉及数据处理
，具体涉及一种基于物联网的数据处理方法
、
装置
、
设备及存储介质
。

技术介绍

[0002]随着互联网的不断发展，工业领域也开始广泛应用网络技术
。
在实际项目中，为了让管理人员能够及时了解工业设备的使用情况，需要将这些设备展示在网页上，并实时显示相关数据
。
目前已存在一些建模技术，但存在一些问题，例如建模精度不高
、
适用范围受限，以及无法针对特定专业模型进行建模等
。
同时，也有一些数据展示技术，例如图表展示，但在展示设备模型生成的大量数据时仍然存在一些问题，例如数据可读性差
、
理解难度大等
。
[0003]因此，为了能够有效地解决以上问题，需要提供一体化
、
智能化
、
可视化的工业物联网设备建模数据处理的方案
。

技术实现思路

[0004]本申请实施例提供一种基于物联网的数据处理方法
、
装置
、
系统
、
设备及存储介质，本申请能够提升数据的可读性和展示效果，降低数据的理解难度
。
[0005]本申请实施例第一方面提供一种基于物联网的数据处理方法，应用于数据处理系统，所述系统包括：感知层
、
网络层
、
服务层和应用层；所述方法包括：
[0006]所述感知层从传感器设备中采集待处理数据，并通过通信网络将所述待处理数据发送给网络层，其中，所述待处理数据包括工业设备产生的实时数据和历史数据；
[0007]所述网络层接收所述待处理数据，并拦截所述待处理数据中的异常数据；
[0008]所述服务层处理所述网络层接收的所述待处理数据，对所述待处理数据进行清洗
、
存储和管理，并对存储后的所述待处理数据进行数据建模，得到建模后的数据；
[0009]所述应用层对所述建模后的数据进行可视化建模，生成所述待处理数据对应的可视化模型，并将所述可视化模型和所述建模后的数据发送至展示页面进行展示
。
[0010]可选地，所述感知层通过通信网络将所述待处理数据发送给网络层，包括：
[0011]获取所述待处理数据的传输协议，其中，所述传输协议包括
MQTT
协议和
OPC
协议；
[0012]根据所述传输协议，对所述待处理数据进行传输，以将所述待处理数据发送至所述网络层
。
[0013]可选地，所述对所述待处理数据进行清洗
、
存储和管理，并对存储后的所述待处理数据进行数据建模，得到建模后的数据，包括：
[0014]对所述待处理数据执行去除异常值
、
补全缺失数据和数据格式转换的预处理操作操作；
[0015]将预处理后的待处理数据进行存储；
[0016]将存储后的待处理数据执行分析和归纳的数据建模操作，得到具有数据关联关系
的所述建模后的数据
。
[0017]可选地，所述应用层对所述建模后的数据进行可视化建模，包括：
[0018]所述应用层的可视化界面根据
WebSocket
协议与所述服务层进行通信，接收所述建模后的数据；
[0019]所述可视化界面对所述建模后的数据执行数据解析
、
数据转换
、
数据过滤的可视化建模操作；
[0020]根据所述
WebSocket
协议与所述服务层保持连接，持续监听所述服务层传输的数据是否为实时数据，若是，则对所述建模后的数据进行展示
。
[0021]可选地，所述生成所述待处理数据对应的可视化模型，并将所述可视化模型和所述建模后的数据发送至展示页面进行展示，包括：
[0022]根据所述可视化建模操作的结果，生成所述待处理数据对应的设备模型；
[0023]获取构建所述设备模型的图形和界面元素；
[0024]将所述设备模型的图形和界面元素发送至所述展示页面，以可视化的形式展示所述设备模型
。
[0025]可选地，所述根据所述可视化建模操作的结果，生成所述待处理数据对应的设备模型，包括：
[0026]对所述预处理后的待处理数据进行特征提取，得到特征数据；
[0027]对所述特征数据进行标注，得到用于训练初始设备模型的训练数据；
[0028]根据所述待处理数据的特征，以及处理所述待处理数据的任务需求，确定所述初始设备模型对应的机器学习算法；
[0029]根据所述训练数据和所述初始设备模型对应的机器学习算法，对所述初始设备模型进行训练，得到训练好的所述设备模型
。
[0030]相应地，本申请实施例第二方面提供一种基于物联网的数据处理装置，所述装置包括：
[0031]基于物联网的数据处理装置，应用于数据处理系统，所述系统包括：感知层
、
网络层
、
服务层和应用层；所述装置包括：感知模块
、
网络模块
、
服务模块和应用模块；
[0032]所述感知模块，用于从传感器设备中采集待处理数据，并通过通信网络将所述待处理数据发送给网络层，其中，所述待处理数据包括工业设备产生的实时数据和历史数据；
[0033]所述网络模块，用于接收所述待处理数据，并拦截所述待处理数据中的异常数据；
[0034]所述服务模块，用于处理所述网络层接收的所述待处理数据，对所述待处理数据进行清洗
、
存储和管理，并对存储后的所述待处理数据进行数据建模，得到建模后的数据；
[0035]所述应用模块，用于对所述建模后的数据进行可视化建模，生成所述待处理数据对应的可视化模型，并将所述可视化模型和所述建模后的数据发送至展示页面进行展示
。
[0036]本申请实施例第三方面提供的一种设备，包括：处理器
、
存储介质和总线，存储介质存储有处理器可执行的机器可读指令，当设备运行时，处理器与存储介质之间通过总线通信，处理器执行机器可读指令，以执行时执行如第一方面中提供的方法的步骤
。
[0037]本申请实施例第四方面还提供一种存储介质，该存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如第一方面提供的方法的步骤
。
[0038]由此可知，本申请实施例的方法在处理数据的过程中，可以先通过感知层从传感
器设备中采集待处理数据，并将其发送到网络层进行处理，使得数据可以及时处理和分析，以便快速做出决策和采取行动
。
网络层在接收待处理数据时，能够拦截异常数据，可以帮助识别和排除异常情况，确保数据的准确性和可靠性...

【技术保护点】

【技术特征摘要】
1.
一种基于物联网的数据处理方法，其特征在于，应用于数据处理系统，所述系统包括：感知层
、
网络层
、
服务层和应用层；所述方法包括：所述感知层从传感器设备中采集待处理数据，并通过通信网络将所述待处理数据发送给网络层，其中，所述待处理数据包括工业设备产生的实时数据和历史数据；所述网络层接收所述待处理数据，并拦截所述待处理数据中的异常数据；所述服务层处理所述网络层接收的所述待处理数据，对所述待处理数据进行清洗
、
存储和管理，并对存储后的所述待处理数据进行数据建模，得到建模后的数据；所述应用层对所述建模后的数据进行可视化建模，生成所述待处理数据对应的可视化模型，并将所述可视化模型和所述建模后的数据发送至展示页面进行展示
。2.
根据权利要求1所述的数据处理方法，其特征在于，所述感知层通过通信网络将所述待处理数据发送给网络层，包括：获取所述待处理数据的传输协议，其中，所述传输协议包括
MQTT
协议和
OPC
协议；根据所述传输协议，对所述待处理数据进行传输，以将所述待处理数据发送至所述网络层
。3.
根据权利要求1所述的数据处理方法，其特征在于，所述对所述待处理数据进行清洗
、
存储和管理，并对存储后的所述待处理数据进行数据建模，得到建模后的数据，包括：对所述待处理数据执行去除异常值
、
补全缺失数据和数据格式转换的预处理操作操作；将预处理后的待处理数据进行存储；将存储后的待处理数据执行分析和归纳的数据建模操作，得到具有数据关联关系的所述建模后的数据
。4.
根据权利要求3所述的数据处理方法，其特征在于，所述应用层对所述建模后的数据进行可视化建模，包括：所述应用层的可视化界面根据
WebSocket
协议与所述服务层进行通信，接收所述建模后的数据；所述可视化界面对所述建模后的数据执行数据解析
、
数据转换
、
数据过滤的可视化建模操作；根据所述
WebSocket
协议与所述服务层保持连接，持续监听所述服务层传输的数据是否为实时数据，若是，则对所述建模后的数据进行展示
。5.
根据权利要求4所述的数据处理方法，其特征在于，所述生成所述待处理数据对应的可视化模型，并将所述可视化模型和所述建模后的数据发送至展示页面进行展示，包括：根据所述可视化建模操作的结果，生成所述待处理数据对应...

【专利技术属性】
技术研发人员：段张超，毛蛟龙，于仁龙，
申请(专利权)人：西安力传智能技术有限公司，
类型：发明
国别省市：