一种基于工业协议的多源数据网关数据分析预警系统技术方案

本发明专利技术公开了一种基于工业协议的多源数据网关数据分析预警系统，包括主控系统，以及与主控系统相连同时相互连接的数据采集模块、数据处理模块和数据分析模块，数据采集模块用于多源数据的采集，采集包括主动式采集与被动式采集，主动式采集依靠传感器对工业设备运行数据的采集，被动式采集为接收工业设备主动发出的以及第三方发出的多源数据；数据处理模块用于对接收到的多源数据进行处理，由于数据来源不同，通过网关的数据也不相同，因此需要进行统一性处理；数据分析模块用于对统一性处理后的数据进行分析，判断是否正常，正常与否的判断由分析模块将数据与实现设定的阈值进行比对，超出阈值即为不正常，需要进行预警提示，否则即为正常。

【技术实现步骤摘要】
一种基于工业协议的多源数据网关数据分析预警系统
本专利技术属于预警
，具体为一种基于工业协议的多源数据网关数据分析预警系统。
技术介绍
目前工业生产中每台设备每个仪表都有自己独特的通讯协议，常见的有modbus通讯协议、RS-232通讯协议、RS-485通讯协议、HART通讯协议等等，各协议之间的数据通常不互通，且由于其使用协议不同，数据的格式等也大不相同，直接获取的数据很难直接查看了解，这就限制了对数据的安全性、完整性以及其衍生的设备工作状态的了解，缺乏安全性。因此我们提出一种基于工业协议的多源数据网关数据分析预警系统。
技术实现思路
本专利技术的目的在于：为了解决的问题，提供一种基于工业协议的多源数据网关数据分析预警系统。本专利技术采用的技术方案如下：一种基于工业协议的多源数据网关数据分析预警系统，包括主控系统，以及与主控系统相连同时相互连接的数据采集模块、数据处理模块和数据分析模块，数据采集模块用于多源数据的采集，采集包括主动式采集与被动式采集，主动式采集依靠传感器对工业设备运行数据的采集，被动式采集为接收工业设备主动发出的以及第三方发出的多源数据；数据处理模块用于对接收到的多源数据进行处理，由于数据来源不同，通过网关的数据也不相同，因此需要进行统一性处理，形成统一的格式与类型，方便于进行分析；数据分析模块用于对统一性处理后的数据进行分析，判断是否正常，正常与否的判断由分析模块将数据与实现设定的阈值进行比对，超出阈值即为不正常，需要进行预警提示，否则即为正常；以及警示模块、设置模块、储存模块和显示模块；警示模块用于直观的对数据的异常处进行提示提醒；设置模块用于技术人员的设置操作与控制；储存模块用于储存接收到的多源数据以及数据在关键处理环节处理后的数据形态，确保数据不会丢失，同时记录系统工作日志；显示模块用于显示分析结果，配合警示模块快速直观进行警示；以及简易修正模块和错误处理模块，简易修正模块用于对数据的基础格式错误、储存格式错误、类型标注错误相关的低级简单错误进行修正，降低数据处理时的复杂度；错误处理模块用于对错误的数据进行处理，包括类型不对应、有效性缺乏和作废相关的数据进行处理。其中，所述数据处理模块包括数据预处理模块、数据融合处理模块和关键数据提取模块组成；数据预处理模块用于对数据进行预处理，使其在后续处理环节能够更快速被提取分析；数据融合处理单元用于将多源数据融合成事先设定的固定单一源数据，从而方便进行查看分析；关键数据提取模块用于对处理后的数据内所需的关键数据进行提取，提取通过事先创建的函数进行提取。其中，所述数据处理模块还包括处理数据校验模块，用于对融合处理完成的数据进行基础校验，来判断数据是否正常及有效。其中，所述数据预处理模块包括降噪单元、标准格式处理单元、异常数据清理单元和重复数据清理单元组成；降噪单元用于对数据进行降噪处理，使其更清晰；标准格式处理单元用于将来自不同数据源的多种数据格式统一转化成设定的标准格式，使其更规范；异常数据清理单元用于对异常数据进行清理；重复数据清理单元用于对重复的数据进行清理，使得数据精简。其中，所述数据预处理模块还包括编码单元，用于对预处理完成的数据进行编码保存同时编码发送，确保有序。其中，所述数据融合处理模块包括统一化处理单元和三级融合单元组成；统一化处理单元用于多源的数据进行统一化处理，统一化处理抛弃各源的格式类型，以设定的格式类型进行统一；三级融合单元根据分布级融合、特征级融合与决策级融合技术进行数据的融合。其中，所述数据融合处理模块还包括畸变误差配准单元，用于对多源数据中的表示同一信息，但格式、类型或取值方式不同情况进行准值确认，以及来自不同数据源表示同一信息中数据不用的情况进行处理。其中，所述主控系统还与物联网相连，用于利用物联网的强大数据互通能力，提高数据的采集以及分析能力，进而提升分析预警的准确性。综上所述，由于采用了上述技术方案，本专利技术的有益效果是：1、本专利技术中，通过对多源数据进行统一化处理使其形成统一的格式类型，既方便了人员的直接查看，同时方便了对数据的提取分析，从而找出问题数据，进而发现对应的数据源存在的问题，做到提前预警，确保企业生产。2、本专利技术中，在数据进行统一化处理前通过修正与错误处理模块来进行先步处理，减少数据的问题点，从而提升数据处理时的处理速度，有利于提升整体的数据分析效率。3、本专利技术中，数据处理完成后经由校验模块对数据进行初步校验，既可以判断处理结果，同时确保预警的精确度。附图说明图1为本专利技术的系统模块化框图；图2为本专利技术中数据处理模块的系统模块化框图；图3为本专利技术中数据预处理模块的系统模块化框图；图4为本专利技术中数据融合处理模块的系统模块化框图。图中标记：1、主控系统；2、数据采集模块；3、数据处理模块；4、数据分析模块；5、警示模块；6、简易修正模块；7、错误处理模块；8、物联网；9、设置模块；10、储存模块；11、显示模块；30、数据预处理模块；31、数据融合处理模块；32、关键数据提取模块；33、处理数据校验模块；300、降噪单元；301、标准格式处理单元；302、异常数据清理单元；303、重复数据清理单元；304、编码单元；310、统一化处理单元；311、畸变误差配准单元；312、三级融合单元。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。请参阅图1～4，一种基于工业协议的多源数据网关数据分析预警系统，包括主控系统1，以及与主控系统1相连同时相互连接的数据采集模块2、数据处理模块3和数据分析模块4，数据采集模块2用于多源数据的采集，采集包括主动式采集与被动式采集，主动式采集依靠传感器对工业设备运行数据的采集，被动式采集为接收工业设备主动发出的以及第三方发出的多源数据；数据处理模块3用于对接收到的多源数据进行处理，由于数据来源不同，通过网关的数据也不相同，因此需要进行统一性处理，形成统一的格式与类型，方便于进行分析；数据分析模块4用于对统一性处理后的数据进行分析，判断是否正常，正常与否的判断由分析模块将数据与实现设定的阈值进行比对，超出阈值即为不正常，需要进行预警提示，否则即为正常；以及警示模块5、设置模块9、储存模块10和显示模块11；警示模块5用于直观的对数据的异常处进行提示提醒；设置模块9用于技术人员的设置操作与控制；储存模块10用于储存接收到的多源数据以及数据在关键处理环节处理后的数据形态，确保数据不会丢失，同时记录系统工作日志；显示模块11用于显示分析结果，配合警示模块快速直观进行警示；以及简易修正模块6和错误处理模块7，简易修正模块6用于对数据的基础格式错误、储存格式错误、类型标注错误相关的低级简单错误进行修正，降低数据处理时的复杂度；错误处理模块7用于对错误的数据进行处理，包括类型不对应、有效性缺乏和作废相关本文档来自技高网...

【技术保护点】
1.一种基于工业协议的多源数据网关数据分析预警系统，其特征在于,包括主控系统（1），以及与主控系统（1）相连同时相互连接的数据采集模块（2）、数据处理模块（3）和数据分析模块（4），数据采集模块（2）用于多源数据的采集，采集包括主动式采集与被动式采集；数据处理模块（3）用于对接收到的多源数据进行处理；数据分析模块（4）用于对统一性处理后的数据进行分析，判断是否正常；以及警示模块（5）、设置模块（9）、储存模块（10）和显示模块（11）；警示模块（5）用于直观的对数据的异常处进行提示提醒；设置模块（9）用于技术人员的设置操作与控制；储存模块（10）用于储存接收到的多源数据以及数据在关键处理环节处理后的数据形态，同时记录系统工作日志；显示模块（11）用于显示分析结果；以及简易修正模块（6）和错误处理模块（7），简易修正模块（6）用于对数据的低级简单错误进行修正；错误处理模块（7）用于对错误的数据进行处理。/n

【技术特征摘要】
1.一种基于工业协议的多源数据网关数据分析预警系统，其特征在于,包括主控系统（1），以及与主控系统（1）相连同时相互连接的数据采集模块（2）、数据处理模块（3）和数据分析模块（4），数据采集模块（2）用于多源数据的采集，采集包括主动式采集与被动式采集；数据处理模块（3）用于对接收到的多源数据进行处理；数据分析模块（4）用于对统一性处理后的数据进行分析，判断是否正常；以及警示模块（5）、设置模块（9）、储存模块（10）和显示模块（11）；警示模块（5）用于直观的对数据的异常处进行提示提醒；设置模块（9）用于技术人员的设置操作与控制；储存模块（10）用于储存接收到的多源数据以及数据在关键处理环节处理后的数据形态，同时记录系统工作日志；显示模块（11）用于显示分析结果；以及简易修正模块（6）和错误处理模块（7），简易修正模块（6）用于对数据的低级简单错误进行修正；错误处理模块（7）用于对错误的数据进行处理。


2.如权利要求1所述的一种基于工业协议的多源数据网关数据分析预警系统，其特征在于，所述数据处理模块（3）包括数据预处理模块（30）、数据融合处理模块（31）、关键数据提取模块（32）和处理数据校验模块（33）组成；数据预处理模块（30）用于对数据进行预处理，使其在后续处理环节能够更快速被提取分析；数据融合处理单元31用于将多源数据融合成事先设定的固定单一源数据，从而方便进行查看分析；关键数据提取模块（32）用于对处理后的数据内所需的关键数据进行提取，提取通过事先创建的函数进行提取。


3.如权利要求2所述的一种基于工业协议的多源数据网关数据分析预警系统，其特征在于，所述数据处理模块（3）还包括处理数据校验模块（33），用于对融合处理完成的数据进行基础校验，来判断数据是否正常及有效。

<...

【专利技术属性】
技术研发人员：闫建良，
申请(专利权)人：河北时代电子有限公司，
类型：发明
国别省市：河北;13