一种工业设备端的实时数据处理方法技术

技术编号:19009150 阅读:44 留言:0更新日期:2018-09-22 09:01
本发明专利技术公开了一种工业设备端的实时数据处理方法,其属于数据分析领域的技术,包括以下步骤:步骤S1,用户通过所述用户端选择若干需要进行数据采集的所述测点,与所述关联测点相连的所述智能终端作为关联终端;步骤S2,所述用户端生成一包括数据配置文件的分析程序并发送至所述服务器;步骤S3,向所述关联终端下发相应的数据处理指令;步骤S4,根据所述实时运行数据提取所述关联测点的特征数据;步骤S5,反馈至所述服务器;步骤S6,所述服务器得到对应的数据分析结果。该技术方案的有益效果是:本发明专利技术减少了数据传输量,提高了数据处理的实时性和数据分析的效率,提高了服务器的运行效率,提高了系统的可维护性和鲁棒性。

A real time data processing method for industrial equipment terminals

The invention discloses a real-time data processing method for an industrial equipment end, which belongs to the technology of data analysis field. The method comprises the following steps: firstly, a user selects a number of measuring points through the user end that need data acquisition, and the intelligent terminal connected with the related measuring point acts as the related terminal; The client generates an analysis program including a data configuration file and sends it to the server; first, sends corresponding data processing instructions to the associated terminal; fourth, extracts the characteristic data of the associated measuring point from the real-time running data; fifth, feeds back to the server; fifth, sends back to the server; fifth, transmits corresponding data processing instructions to the associated terminal; fifth, extracts the characteristic data of the associated measuring point from the real-time running data; fifth The server receives the corresponding data analysis results. The beneficial effect of the technical scheme is that the invention reduces the amount of data transmission, improves the real-time data processing and the efficiency of data analysis, improves the operation efficiency of the server, and improves the maintainability and robustness of the system.

【技术实现步骤摘要】
一种工业设备端的实时数据处理方法
本专利技术涉及的是一种数据分析领域的技术,具体是一种工业设备端的实时数据处理方法。
技术介绍
工业设备运行过程中,存在传感系统、控制指令、生产状态等多方面的数据,应用数据分析技术能够有效挖掘数据潜在价值,客观评估设备运行性能,是保证设备高效、可靠运行的重要手段。工业设备运行中,存在大量的传感器节点和控制节点,实时采集的数据量巨大,数据一般在现场部署数据库进行持久化存储。数据处理技术是工业数据分析中的重要步骤之一,数据处理是指对所采集的数据进行必要的处理。传统工业数据分析过程中,数据处理环节一般集中在用户端服务器,需要处理的实时数据是持续不断的,对网络带宽和数据库硬件资源要求较高,并且分析效率受限。工业设备运行过程中,存在大量的冗余、无效、高频的数据,分析过程中持续的访问查询会占用大量通信带宽,存在数据丢包、网络延时等问题,也会降低设备端数据库的稳定性与实时性。由于数据处理集中在用户端,需要同时处理多个工业设备运行数据,服务器核心模块负载重,制约系统性能瓶颈。同时分析过程中,局部节点的失效易造成系统异常,难以保证系统负载均衡和容错性。
技术实现思路
本专利技术针对现有技术存在的上述不足,提出一种工业设备端的实时数据处理方法。本专利技术减少了数据传输量,降低了网络资源的占用率,提高了数据处理的实时性和数据分析的效率,降低了服务器的数据处理压力,提高了服务器的运行效率,保证了数据的可靠性和准确性,提高了系统的可维护性和鲁棒性。本专利技术是通过以下技术方案实现的:本专利技术涉及一种工业设备端的实时数据处理方法,预先设置一远程连接用户端的服务器,以及设置通过网络与所述服务器相连的至少一个智能终端,每个所述智能终端关联于至少一个所述工业设备端,每个所述工业设备端设有若干数据采集装置,每个所述数据采集装置对应于若干测点,还包括以下步骤:步骤S1,用户通过所述用户端选择若干需要进行数据采集的所述测点,与所述关联测点相连的所述智能终端作为关联终端;步骤S2,所述用户端生成一包括数据配置文件的分析程序并发送至所述服务器,所述数据配置文件中包括所述关联终端的终端描述信息和所述关联测点的所述测点描述信息;步骤S3,所述服务器根据所述数据配置文件中的所述终端描述信息与所述关联终端建立通信连接,并根据所述数据配置文件中的所述测点描述信息向所述关联终端下发相应的数据处理指令;步骤S4,所述关联终端根据所述数据处理指令,通过对应于所述关联测点的所述数据采集装置采集所述关联测点的实时运行数据,并根据所述实时运行数据提取所述关联测点的特征数据;步骤S5,所述关联终端将所述特征数据按照预设的数据格式形成数据包并反馈至所述服务器;步骤S6,所述服务器运行所述分析程序以根据所述数据包得到对应的数据分析结果并反馈至所述用户端。优选的,该工业设备端的实时数据处理方法,其中,所述终端描述信息包括:终端型号、终端IP、连接端口、身份认证信息、记录所述特征数据种类的数据清单、数据传输频率以及数据传输格式。优选的,该工业设备端的实时数据处理方法,其中,所述测点描述信息包括:测点名称、采样频率、所述实时运行数据的数据长度以及预设的所述数据格式。优选的,该工业设备端的实时数据处理方法,其中,所述的步骤S4具体包括以下步骤:步骤S41,根据所述数据长度和所述采样频率所述关联测点的所述实时运行数据;步骤S42,通过预设的数据处理策略对所述实时运行数据进行数据处理,得到符合所述数据清单的所述特征数据。优选的,该工业设备端的实时数据处理方法,其中,在所述步骤S41之前,所述关联终端判断所述关联测点是否有效:若否,则以缺省值代替所述特征数据,以完成对所述关联测点的数据采集;若是,则进行所述步骤S41。优选的,该工业设备端的实时数据处理方法,其中,所述数据处理策略包括:数据标准化处理策略,和/或异常值剔除处理策略,和/或数据降维处理策略,和/或统计指标处理策略,和/或傅里叶变换处理策略,和/或短时傅里叶变换处理策略。优选的,该工业设备端的实时数据处理方法,其中,所述步骤S4中的所述实时运行数据通过以下步骤获得:步骤S51,所述关联终端根据所述数据处理指令向对应的所述关联测点的所述数据采集装置下发数据采集指令;步骤S52,所述数据采集装置根据所述数据采集指令对所述关联测点进行数据采集,以得到所述实时运行数据并保存于一数据库模块中;步骤S53,所述关联终端从所述数据库模块中调取所述实时运行数据。优选的,该工业设备端的实时数据处理方法,其中,所述数据库模块为面向对象数据库。上述技术方案的有益效果是:本专利技术减少了数据传输量,降低了网络资源的占用率,提高了数据处理的实时性和数据分析的效率,降低了服务器的数据处理压力,提高了服务器的运行效率,保证了数据的可靠性和准确性,提高了系统的可维护性和鲁棒性。附图说明图1为本专利技术的较佳的实施例中,一种工业设备端的实时数据处理方法的流程示意图;图2为本专利技术的较佳的实施例中,一种工业设备端的实时数据处理方法的特征数据提取过程示意图;图3为本专利技术的较佳的实施例中,实时运行数据采集流程示意图。具体实施方式下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本专利技术保护的范围。需要说明的是,在不冲突的情况下,本专利技术中的实施例及实施例中的特征可以相互组合。下面结合附图和具体实施例对本专利技术作进一步说明,但不作为本专利技术的限定。如图1所示,本实施例涉及一种工业设备端的实时数据处理方法:本实施例涉及的一种工业设备端的实时数据处理方法,预先设置一远程连接用户端的服务器,以及设置通过网络与服务器相连的至少一个智能终端,每个智能终端关联于至少一个工业设备端,每个工业设备端设有若干数据采集装置,每个数据采集装置对应于若干测点。本实施例中数据处理方法用于工业设备的实时数据处理,可应用于风力放电机、磨煤机、机床以及发电机组等工业设备中。用户端连有用户服务器,在工业设备端连有若干智能终端,工业设备端设有若干数据采集装置,数据采集装置对应于若干测点。数据采集装置用于直接采集工业设备的测点处的数据,并能够传送到与该数据采集装置相连的智能终端,以供进一步处理。如图1所示,本实施例的工业设备端的实时数据处理方法,还包括以下步骤:步骤S1,用户通过用户端选择若干需要进行数据采集的测点,与关联测点相连的智能终端作为关联终端。当用户需要进行数据采集时,用户首先确定所要进行数据采集的测点。根据确定的测点,进一步选择与之相连的智能终端。将被选择的测点作为关联测点,与这些关联测点相连的智能终端作为关联终端。步骤S2,用户端生成一包括数据配置文件的分析程序并发送至服务器,数据配置文件中包括关联终端的终端描述信息和关联测点的测点描述信息。用户根据所要进行的实时数据分析业务的要求,建立一分析模型,并根据该分析模型形成分析程序,而后将分析程序通过用户端下发到与该用户端相连的服务器中,通过服务器执行该分析程序。数据配置文件中包括:关联终端的终端描述信息和关联测点的测点描述信息。终端描述信息包括:本文档来自技高网...
一种工业设备端的实时数据处理方法

【技术保护点】
1.一种工业设备端的实时数据处理方法,其特征在于,预先设置一远程连接用户端的服务器,以及设置通过网络与所述服务器相连的至少一个智能终端,每个所述智能终端关联与至少一个所述工业设备端,每个所述工业设备端设有若干数据采集装置,每个所述数据采集装置对应于若干测点,还包括以下步骤:步骤S1,用户通过所述用户端选择若干需要进行数据采集的所述测点,与所述关联测点相连的所述智能终端作为关联终端;步骤S2,所述用户端生成一包括数据配置文件的分析程序并发送至所述服务器,所述数据配置文件中包括所述关联终端的终端描述信息和所述关联测点的所述测点描述信息;步骤S3,所述服务器根据所述数据配置文件中的所述终端描述信息与所述关联终端建立通信连接,并根据所述数据配置文件中的所述测点描述信息向所述关联终端下发相应的数据处理指令;步骤S4,所述关联终端根据所述数据处理指令,通过对应于所述关联测点的所述数据采集装置采集所述关联测点的实时运行数据,并根据所述实时运行数据提取所述关联测点的特征数据;步骤S5,所述关联终端将所述特征数据按照预设的数据格式形成数据包并反馈至所述服务器;步骤S6,所述服务器运行所述分析程序以根据所述数据包得到对应的数据分析结果并反馈至所述用户端。...

【技术特征摘要】
1.一种工业设备端的实时数据处理方法,其特征在于,预先设置一远程连接用户端的服务器,以及设置通过网络与所述服务器相连的至少一个智能终端,每个所述智能终端关联与至少一个所述工业设备端,每个所述工业设备端设有若干数据采集装置,每个所述数据采集装置对应于若干测点,还包括以下步骤:步骤S1,用户通过所述用户端选择若干需要进行数据采集的所述测点,与所述关联测点相连的所述智能终端作为关联终端;步骤S2,所述用户端生成一包括数据配置文件的分析程序并发送至所述服务器,所述数据配置文件中包括所述关联终端的终端描述信息和所述关联测点的所述测点描述信息;步骤S3,所述服务器根据所述数据配置文件中的所述终端描述信息与所述关联终端建立通信连接,并根据所述数据配置文件中的所述测点描述信息向所述关联终端下发相应的数据处理指令;步骤S4,所述关联终端根据所述数据处理指令,通过对应于所述关联测点的所述数据采集装置采集所述关联测点的实时运行数据,并根据所述实时运行数据提取所述关联测点的特征数据;步骤S5,所述关联终端将所述特征数据按照预设的数据格式形成数据包并反馈至所述服务器;步骤S6,所述服务器运行所述分析程序以根据所述数据包得到对应的数据分析结果并反馈至所述用户端。2.根据权利要求1所述的工业设备端的实时数据处理方法,其特征是,所述终端描述信息包括:终端型号、终端IP、连接端口、身份认证信息、记录所述特征数据种类的数据清单、数据传输频率以及数据传输格式。3.根据权利要求1所述的工业设备端的实时数据处理方法,其特征是,所述测点描述信息包括:测点名称、采样频率、所述实时运行数据的数据长...

【专利技术属性】
技术研发人员:郭双全许伟谢晓龙
申请(专利权)人:上海电气集团股份有限公司
类型:发明
国别省市:上海,31

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1