基于物联网平台的数据处理优化方法及系统技术方案

本发明专利技术实施例公开了一种基于物联网平台的数据处理优化方法、系统、电子设备及存储介质，响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将目标数据发送至分布式服务器集群；分布式服务器集群接收目标数据后，对目标数据进行数据分析和数据处理，得到处理后数据，并将处理后数据发送至数据库中；将数据库中处理后数据进行汇总处理后发送至客户端的业务数据库；响应于数据的操作请求，对业务数据库中的处理后数据执行与操作请求相对应的操作。该基于物联网平台的数据处理优化方法解决现有技术中物联网传感器收集大量数据后处理过程繁琐复杂，且当数据较多或数据保存时间较长时，存储成本较高的问题。存储成本较高的问题。存储成本较高的问题。

【技术实现步骤摘要】
基于物联网平台的数据处理优化方法及系统


[0001]本专利技术涉及计算机
，具体涉及一种基于物联网平台的数据处理优化方法、系统、电子设备及存储介质。

技术介绍

[0002]想要将物联网传感器收集的大量数据挖掘出更深的价值，需要对物联网传感器收集的大量数据进行处理及分析，但现有的数据采集处理过程较为繁琐复杂，不便于对数据进行过滤除杂，数据之间存在着不互通、不共享的弊端，且数据越多，保存的时间越长，存储数据的成本就越高。
[0003]该专利技术在数据采集这一方面，保证数据准确性的同时，减少数据采集工作的重复性，进一步提高数据的准确性及完整性。
[0004]亟需一种基于物联网平台对数据处理进行优化的方法。

技术实现思路

[0005]本专利技术实施例的目的在于提供一种基于物联网平台的数据处理优化方法、系统、电子设备及存储介质，用以解决现有技术中物联网传感器收集大量数据后处理过程繁琐复杂，且当数据较多或数据保存时间较长时，存储成本较高的问题。
[0006]为实现上述目的，本专利技术实施例提供一种基于物联网平台的数据处理优化方法，所述方法具体包括：
[0007]响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群；
[0008]所述分布式服务器集群接收所述目标数据后，对所述目标数据进行数据分析和数据处理，得到处理后数据，并将处理后数据发送至数据库中；
[0009]将所述数据库中所述处理后数据进行汇总处理后发送至客户端的业务数据库；
[0010]响应于数据的操作请求，对所述业务数据库中的处理后数据执行与所述操作请求相对应的操作。
[0011]在上述技术方案的基础上，本专利技术还可以做如下改进：
[0012]进一步地，所述响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群，包括：
[0013]所述数据采集设备接收所述网络数据发送的数据采集请求后，识别所述数据采集请求是否存在于采集任务中，当所要采集的目标数据存在于所述采集任务中时，通过数据采集设备采集目标数据；
[0014]当所要采集的目标数据不存在于所述采集任务中时，向采集对象发起数据采集请求，重新进行数据采集
[0015]进一步地，所述响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群，还包括：
[0016]当所述目标数据需要补录时，对补录数据进行审核，得到审核结果，其中，所述审核结果包括审核通过和审核不通过；
[0017]当审核通过时，将所述补录数据发送至分布式服务器集群，当审核不通过时，所述补录数据不进行补录。
[0018]进一步地，所述响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群，还包括：
[0019]当目标数据需要校验时，对校验数据进行审核，得到审核结果，其中，所述审核结果包括审核通过和审核不通过；
[0020]当审核通过时，自动将正确字段覆盖原数据，当审核不通过时，所述原数据不做变更。
[0021]进一步地，所述分布式服务器集群接收所述目标数据后，对所述目标数据进行数据分析和数据处理，得到处理后数据，并将处理后数据发送至数据库中，包括：
[0022]所述分布式服务器集群接收所述目标数据后，将所述目标数据发送至数据分析模块中进行数据分析，将数据分析模块分析后的数据发送至数据处理模块中进行数据处理，并将处理后数据发送至数据库中。
[0023]进一步地，所述数据库包括基础数据库、交换工具、中间库、业务数据库；
[0024]所述交换工具将基础数据库中存储的处理后数据进行数据清洗转换，并将进行数据清洗转换后的处理后数据后发送至中间库；
[0025]所述中间库将所述处理后数据进行格式转换后，发送至业务数据库中；
[0026]所述业务数据库通过数据管理模块对处理后数据进行新增、删除、修改、查询、导入和导出操作。
[0027]进一步地，所述基于物联网平台的数据处理优化方法，还包括：
[0028]构建与所述分布式服务器保持连接的临时集群，通过所述临时集群查询所述分布式服务器集群的数据信息。
[0029]一种基于物联网平台的数据处理优化系统，包括：
[0030]数据采集设备，用于响应于网络数据发送的数据采集请求，采集目标数据，并将所述目标数据发送至分布式服务器集群；
[0031]所述分布式服务器集群包括数据分析模块、数据处理模块和数据库；
[0032]所述数据分析模块，用于对所述目标数据进行数据分析；
[0033]所述数据处理模块，用于对经数据分析模块分析后的数据进行数据处理，得到处理后数据，并将处理后数据发送至数据库中；
[0034]所述数据库，用于将所述处理后数据进行汇总处理后发送至客户端的业务数据库；
[0035]显示终端，用于响应于数据的操作请求，对所述业务数据库中的处理后数据执行与所述操作请求相对应的操作。
[0036]一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如所述方法的步骤。
[0037]一种非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现所述方法的步骤。
[0038]本专利技术实施例具有如下优点：
[0039]本专利技术中基于物联网平台的数据处理优化方法，响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群；所述分布式服务器集群接收所述目标数据后，对所述目标数据进行数据分析和数据处理，得到处理后数据，并将处理后数据发送至数据库中；将所述数据库中所述处理后数据进行汇总处理后发送至客户端的业务数据库；响应于数据的操作请求，对所述业务数据库中的处理后数据执行与所述操作请求相对应的操作；解决了现有技术中物联网传感器收集大量数据后处理过程繁琐复杂，且当数据较多或数据保存时间较长时，存储成本较高的问题。
附图说明
[0040]为了更清楚地说明本专利技术的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引申获得其它的实施附图。
[0041]本说明书所绘示的结构、比例、大小等，均仅用以配合说明书所揭示的内容，以供熟悉此技术的人士了解与阅读，并非用以限定本专利技术可实施的限定条件，故不具技术上的实质意义，任何结构的修饰、比例关系的改变或大小的调整，在不影响本专利技术所能产生的功效及所能达成的目的下，均应仍落在本专利技术所揭示的
技术实现思路
能涵盖的范围内。
[0042]图1为本专利技术基于物联网平台的数据处理优化方法的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于物联网平台的数据处理优化方法，其特征在于，所述方法具体包括：响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群；所述分布式服务器集群接收所述目标数据后，对所述目标数据进行数据分析和数据处理，得到处理后数据，并将处理后数据发送至数据库中；将所述数据库中所述处理后数据进行汇总处理后发送至客户端的业务数据库；响应于数据的操作请求，对所述业务数据库中的处理后数据执行与所述操作请求相对应的操作。2.根据权利要求1所述基于物联网平台的数据处理优化方法，其特征在于，所述响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群，包括：所述数据采集设备接收所述网络数据发送的数据采集请求后，识别所述数据采集请求是否存在于采集任务中，当所要采集的目标数据存在于所述采集任务中时，通过数据采集设备采集目标数据；当所要采集的目标数据不存在于所述采集任务中时，向采集对象发起数据采集请求，重新进行数据采集。3.根据权利要求1所述基于物联网平台的数据处理优化方法，其特征在于，所述响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群，还包括：当所述目标数据需要补录时，对补录数据进行审核，得到审核结果，其中，所述审核结果包括审核通过和审核不通过；当审核通过时，将所述补录数据发送至分布式服务器集群，当审核不通过时，所述补录数据不进行补录。4.根据权利要求1所述基于物联网平台的数据处理优化方法，其特征在于，所述响应于网络数据发送的数据采集请求，通过数据采集设备采集目标数据，并将所述目标数据发送至分布式服务器集群，还包括：当目标数据需要校验时，对校验数据进行审核，得到审核结果，其中，所述审核结果包括审核通过和审核不通过；当审核通过时，自动将正确字段覆盖原数据，当审核不通过时，所述原数据不做变更。5.根据权利要求1所述基于物联网平台的数据处理优化方法，其特征在于，所述分布式服务器集群接收所述目标数据后，对所述目...

【专利技术属性】
技术研发人员：芮建秋，刘俊，张春梅，季仁珲，程传节，瞿震，金长辉，
申请(专利权)人：苏州智能交通信息科技股份有限公司，
类型：发明
国别省市：