煤矿数据分布式分发方法、系统、设备及可读存储介质技术方案

本发明专利技术提供了煤矿数据分布式分发方法、系统、设备及可读存储介质，使用煤矿数据传输管道传输煤矿数据，实现煤矿数据接入的可靠性与顺序性，管道中数据实时推送到后端煤矿智能应用中，保证数据的实时性；使用单个煤矿数据传输管道为不同的后端煤矿智能应用推送数据，保证后端煤矿智能应用所需数据种类的多样性，解决煤矿数据分发的问题。将煤矿数据传输管道以分布式的形式运行在集群中不同机器上，保证煤矿数据的冗余性与集群的高可用性；当煤矿数据种类与智能应用个数增多，原有集群负载过重时，只需增加集群机器数量，煤矿数据传输管道会自动均匀分布到不同集群中不同机器上，保证煤矿数据接入、分发功能的可扩展性。分发功能的可扩展性。分发功能的可扩展性。

【技术实现步骤摘要】
煤矿数据分布式分发方法、系统、设备及可读存储介质


[0001]本专利技术涉及煤矿智能应用
，具体为煤矿数据分布式分发方法、系统、设备及可读存储介质。

技术介绍

[0002]随着大数据与人工智能技术的逐步成熟，煤矿建设开始尝试向智能矿山建设的目标靠拢。智能矿山的建设通常会全面覆盖煤炭的生产、销售、管理等业务环节，且各个环节又涉及到类别繁多的煤矿数据与智能应用，而往往一个煤矿智能应用需要多种煤矿数据做支撑，并且随着煤矿数据种类与智能应用个数的增加，为煤矿数据的可靠接入与分发带来了困难。具体来讲分为以下三点：
[0003]1.煤矿数据时时刻刻都在产生，当数据产生的速度大于煤矿智能应用的处理速度时，会造成煤矿数据的丢失；当煤矿智能应用需要强实时性数据时，接入的煤矿数据先存入数据库后从数据库读取，这将降低数据的实时性，以上问题为煤矿数据的可靠接入带来了挑战。
[0004]2.当多个煤矿智能应用都需要获取同一种煤矿数据，或者一个煤矿智能应用需要获取多种不同的煤矿数据时，需要捋清数据来源及该数据为哪些智能应用服务，这就为煤矿数据的分发带来了挑战。
[0005]3.当煤矿数据种类及煤矿智能应用个数增多时，需要完成新增煤矿数据的接入并保证新增智能应用可获取所需数据，还需保证原有智能应用获取数据不受影响，这为煤矿数据接入、分发功能的可扩展性带来了挑战。

技术实现思路

[0006]针对现有技术中煤矿智能应用存在煤炭数据接入与分发的问题，本专利技术提供煤矿数据分布式分发方法、系统、设备及可读存储介质，有效的将煤矿数据统一接入，并分发到不同的煤矿数据传输管道中，在管道中进行缓冲保存，使得煤矿数据不丢失，有效的保证了煤矿数据的冗余性及煤矿数据接入分发功能的可扩展性。
[0007]本专利技术是通过以下技术方案来实现：
[0008]一种煤矿数据分布式分发方法，包括如下步骤：
[0009]步骤1，在煤矿数据源中获取煤矿数据，并发送至管道分发器；
[0010]步骤2，管道分发器接收到煤矿数据后向分布式协调中心发送信息获取请求，并将数据信息发送至煤矿数据传输管道单元内；
[0011]步骤3，煤矿数据传输管道单元分布多组机器，机器内排布多根煤矿数据传输管道，煤矿数据传输管道内的数据信息对应传输至后端煤矿智能应用中，完成数据分发传输；
[0012]所述煤矿数据传输管道单元中机器内的数据信息与后端煤矿智能应用内的传输方式包括一个数据输出管道对应一个应用或一个数据输出管道对应多个应用。
[0013]优选的，步骤1中，所述煤矿数据源包括传感器和前端设备，所述传感器和前端设
备分别产生煤矿数据并发送至管道分发器。
[0014]优选的，步骤2中，管道分发器向分布式协调中心发送信息获取集群中现有机器与管道信息时，当分布式协调中心查询煤矿数据传输管道单元内没有煤矿数据传输管道或者煤矿数据传输管道的机器无法满足需要时，分布式协调中心向管道分发器反馈信号后，管道分发器发送创建管道请求，分布式协调中心将管道创建命令推送到已经注册过的机器上，在机器中进行煤矿数据传输管道的创建，煤矿数据传输管道创建完成后，管道分发器将继续发送数据信息至煤矿数据传输管道单元中完成数据传输任务。
[0015]优选的，所述管道分发器在煤矿数据传输中可将不同种类的煤矿数据传输给机器内的一个煤矿数据传输管道或者多个煤矿数据传输管道；煤矿数据传输管道按照数据传输顺序，将数据缓冲保存在煤矿数据传输管道中，并将每个管道以分布式的形式运行在煤矿数据传输管道单元中多台机器上，保证数据的冗余性。
[0016]优选的，所述煤矿数据传输管道单元内包括若干机器；若干机器对应与后端煤矿智能应用进行数据传输任务；
[0017]当若干机器中的一个机器掉线时，分布式协调中心无法接收到该机器的心跳信息时，分布式协调中心对该机器进行数据终止传输，并切换其他机器进行数据传输；
[0018]当有新机器加入煤矿数据传输管道内，或者掉线的机器重新上线时，分布式协调中心接收到新机器或者掉线的机器的心跳信息后，分布式协调中心对新机器或者掉线的机器进行煤矿传输管道的分配。
[0019]进一步的，若干所述机器通过数据同步子进程实现内部数据同步。
[0020]一种煤矿数据分布式分发系统，包括控制器和煤矿数据分发单元；控制器与煤矿数据分发单元电源连接设置；
[0021]所述煤矿数据分发单元包括煤矿数据源、管道分发器、煤矿数据传输管道单元、分布式协调中心和后端煤矿智能应用；
[0022]煤矿数据源的数据输出端连接至管道分发器；管道分发器的数据传输端连接煤矿数据传输管道单元；煤矿数据传输管道单元的数据传输端连接后端煤矿智能应用；分布式协调中心的信号传输端分别连接管道分发器、煤矿数据传输管道单元和后端煤矿智能应用；
[0023]进一步的，所述控制器包括数据获取模块、数据分发模块、数据传输模块、数据接收模块、数据存储模块和人机交互模块；
[0024]所述数据获取模块，用于在煤矿数据源对煤矿数据的获取；
[0025]所述数据分发模块，用于管道分发器和煤矿数据传输管道单元中对煤矿数据的发射；
[0026]所述数据传输模块，用于煤矿数据源、管道分发器、煤矿数据传输管道单元、分布式协调中心和后端煤矿智能应用的煤矿数据传输；
[0027]所述数据接收模块，用于管道分发器、煤矿数据传输管道单元、分布式协调中心和后端煤矿智能应用的煤矿数据的接收；
[0028]所述数据存储模块，用于在煤矿数据传输管道单元内煤矿数据的存储；
[0029]所述人机交互模块，用于信息显示。
[0030]一种计算机设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理
器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如上述所述煤矿数据分布式分发方法的步骤。
[0031]一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上述所述煤矿数据分布式分发方法的步骤。
[0032]与现有技术相比，本专利技术具有以下有益的技术效果：
[0033]本专利技术提供了一种煤矿数据分布式分发方法，使用煤矿数据传输管道传输煤矿数据，实现煤矿数据接入的可靠性与顺序性，管道中数据实时推送到后端煤矿智能应用中，保证数据的实时性；使用单个煤矿数据传输管道为不同的后端煤矿智能应用推送数据，保证后端煤矿智能应用所需数据种类的多样性，解决煤矿数据分发的问题。将煤矿数据传输管道以分布式的形式运行在集群中不同机器上，保证煤矿数据的冗余性与集群的高可用性；当煤矿数据种类与智能应用个数增多，原有集群负载过重时，只需增加集群机器数量，煤矿数据传输管道会自动均匀分布到不同集群中不同机器上，保证煤矿数据接入、分发功能的可扩展性。
[0034]进一步的，通过煤矿数据传输管道的方式，将不同来源的煤矿数据通过不同的管道进行传输，再实时推送到不同的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种煤矿数据分布式分发方法，其特征在于，包括如下步骤：步骤1，在煤矿数据源中获取煤矿数据，并发送至管道分发器；步骤2，管道分发器接收到煤矿数据后向分布式协调中心发送信息获取请求，并将数据信息发送至煤矿数据传输管道单元内；步骤3，煤矿数据传输管道单元分布多组机器，机器内排布多根煤矿数据传输管道，煤矿数据传输管道内的数据信息对应传输至后端煤矿智能应用中，完成数据分发传输；所述煤矿数据传输管道单元中机器内的数据信息与后端煤矿智能应用内的传输方式包括一个数据输出管道对应一个应用或一个数据输出管道对应多个应用。2.根据权利要求1所述的一种煤矿数据分布式分发方法，其特征在于，步骤1中，所述煤矿数据源包括传感器和前端设备，所述传感器和前端设备分别产生煤矿数据并发送至管道分发器。3.根据权利要求1所述的一种煤矿数据分布式分发方法，其特征在于，步骤2中，管道分发器向分布式协调中心发送信息获取集群中现有机器与管道信息时，当分布式协调中心查询煤矿数据传输管道单元内没有煤矿数据传输管道或者煤矿数据传输管道的机器无法满足需要时，分布式协调中心向管道分发器反馈信号后，管道分发器发送创建管道请求，分布式协调中心将管道创建命令推送到已经注册过的机器上，在机器中进行煤矿数据传输管道的创建，煤矿数据传输管道创建完成后，管道分发器将继续发送数据信息至煤矿数据传输管道单元中完成数据传输任务。4.根据权利要求1所述的一种煤矿数据分布式分发方法，其特征在于，所述管道分发器在煤矿数据传输中可将不同种类的煤矿数据传输给机器内的一个煤矿数据传输管道或者多个煤矿数据传输管道；煤矿数据传输管道按照数据传输顺序，将数据缓冲保存在煤矿数据传输管道中，并将每个管道以分布式的形式运行在煤矿数据传输管道单元中多台机器上，保证数据的冗余性。5.根据权利要求1所述的一种煤矿数据分布式分发方法，其特征在于，所述煤矿数据传输管道单元内包括若干机器；若干机器对应与后端煤矿智能应用进行数据传输任务；当若干机器中的一个机器掉线时，分布式协调中心无法接收到该机器的心跳信息时，分布式协调中心对该机器进行数据终止...

【专利技术属性】
技术研发人员：郑忠友，邴喆，汪海涛，张光磊，谈娌娜，张阳，王星，董振良，董洛兵，段明东，谷中，秦一帆，
申请(专利权)人：西安梅隆控制工程有限责任公司，
类型：发明
国别省市：