一种基于物联网终端数据智慧采集方法技术

一种基于物联网终端数据智慧采集方法，包括终端应用、数据服务程序、传递主干、主干监听程序、Spark计算引擎、传感器终端、HBase数据库及云存储，包括数据采集、比对步骤。本发明专利技术所公开的一个方面，通过增加被采集数据的比对环节，极大地提高了被采集数据的准确性与及时性。

An intelligent data acquisition method based on Internet of things terminal

An intelligent data acquisition method based on Internet of things terminal includes terminal application, data service program, transmission backbone, trunk monitor program, spark computing engine, sensor terminal, HBase database and cloud storage, including data acquisition and comparison steps. In one aspect disclosed by the invention, the accuracy and timeliness of the collected data are greatly improved by increasing the comparison link of the collected data.

【技术实现步骤摘要】
一种基于物联网终端数据智慧采集方法
本专利技术涉及数据采集领域，具体涉及一种基于物联网终端数据智慧采集方法。
技术介绍
针对现有物联网设备应用的场景(如学校与园区类大规模应用的复杂场景)，目前基本己实现智能化，并直接在服务端数据库按条件查询、采集与统计分析。如何能更有效精准到未端应用的终端数据的自定义灵活采集，也就是针对上位终端的智慧采集与数据挖掘综合处理技术，目前还没有成型的技术实现。
技术实现思路
本专利技术所公开的一个方面，通过增加被采集数据的比对环节，极大地提高了被采集数据的准确性与及时性。为达到上述目的，本专利技术提供如下的技术方案：1、一种基于物联网终端数据智慧采集方法,包括终端应用、数据服务程序、传递主干、主干监听程序、Spark计算引擎、传感器终端、HBase数据库及云存储，其特征在于，包括以下步骤：S1、终端应用向数据服务程序发送收集数据请求；S2、数据服务程序向传感器终端发出采集通知；与此同时，主干监听程序记录该采集通知；S3、传感器终端收集数据并上传到云存储；S4、云存储发送收集完成通知到数据收集服务程序；S5、数据服务程序反馈收到收集完成通知到传递主干，并将结果文件发送到云存储的下载地址上；S6、主干监听程序通过传递主干提供云存储链接读取收集到的数据，并上传到分布分布式文件系统；S7、通过Spark计算引擎搜索HBase数据库中对于所收集数据的对应数据；S8、调用数据流应用程序编程接口启动算法对所收集数据与S5检索的数据进行数据分析比对，并得到计算结果；S9、终端应用通过数据服务程序获得计算结果。本专利技术所公开的一个方面，通过增加被采集数据的比对环节，极大地提高了被采集数据的准确性与及时性。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本公开实施例提供的一种基于物联网终端数据智慧采集方法的数据采集运行示意图。具体实施方式为使本专利技术实施例的目的、技术方案和优点更加清楚，下面将结合本专利技术实施例和附图，对本专利技术实施例中的技术方案进行清楚、完整地描述。需要说明的是，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。下面结合附图说明本专利技术的具体实施方式。实施例如图1所示，为一种基于物联网终端数据智慧采集方法据采集运行示意图,包括终端应用、数据服务程序、传递主干、主干监听程序、Spark计算引擎、传感器终端、HBase数据库及云存储，其特征在于，S1、终端应用向数据服务程序发送收集数据请求；S2、数据服务程序向传感器终端发出采集通知；与此同时，主干监听程序记录该采集通知；S3、传感器终端收集数据并上传到云存储；S4、云存储发送收集完成通知到数据收集服务程序；S5、数据服务程序反馈收到收集完成通知到传递主干，并将结果文件发送到云存储的下载地址上；S6、主干监听程序通过传递主干提供云存储链接读取收集到的数据，并上传到分布分布式文件系统；S7、通过Spark计算引擎搜索HBase数据库中对于所收集数据的对应数据；S8、调用数据流应用程序编程接口启动算法对所收集数据与S5检索的数据进行数据分析比对，并得到计算结果；S9、终端应用通过数据服务程序获得计算结果。S5-S9通过增加被采集数据的比对环节，极大地提高了被采集数据的准确性与及时性。以上所述实施例仅表达了本专利技术的一种实施方式，其描述较为具体和详细，但并不能因此而理解为对本专利技术专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本专利技术构思的前提下，还可以做出若干变形和改进，这些都属于本专利技术的保护范围。因此，本专利技术专利的保护范围应以所附权利要求为准。本文档来自技高网...

【技术保护点】
1.一种基于物联网终端数据智慧采集方法,包括终端应用、数据服务程序、传递主干、主干监听程序、Spark计算引擎、传感器终端、HBase数据库及云存储，其特征在于，包括以下步骤：/nS1、终端应用向数据服务程序发送收集数据请求；/nS2、数据服务程序向传感器终端发出采集通知；与此同时，主干监听程序记录该采集通知；/nS3、传感器终端收集数据并上传到云存储；/nS4、云存储发送收集完成通知到数据收集服务程序；/nS5、数据服务程序反馈收到收集完成通知到传递主干，并将结果文件发送到云存储的下载地址上；/nS6、主干监听程序通过传递主干提供云存储链接读取收集到的数据，并上传到分布分布式文件系统；/nS7、通过Spark计算引擎搜索HBase数据库中对于所收集数据的对应数据；/nS8、调用数据流应用程序编程接口启动算法对所收集数据与S5检索的数据进行数据分析比对，并得到计算结果；/nS9、终端应用通过数据服务程序获得计算结果。/n

【技术特征摘要】
1.一种基于物联网终端数据智慧采集方法,包括终端应用、数据服务程序、传递主干、主干监听程序、Spark计算引擎、传感器终端、HBase数据库及云存储，其特征在于，包括以下步骤：
S1、终端应用向数据服务程序发送收集数据请求；
S2、数据服务程序向传感器终端发出采集通知；与此同时，主干监听程序记录该采集通知；
S3、传感器终端收集数据并上传到云存储；
S4、云存储发送收集完成通知到数据收集服务程序；
...

【专利技术属性】
技术研发人员：吴亚钦，
申请(专利权)人：广州才捷信息科技有限公司，
类型：发明
国别省市：广东;44