一种基于物联网和大数据的数据传输系统、方法及介质技术方案

本发明专利技术实施例公开了一种基于物联网和大数据的数据传输系统、方法及介质，所述系统包括：采集单元，用于多样性的数据采集；预处理单元，用于将所述采集单元所采集的数据按预设周期进行打包以形成数据包，并对各数据包中的数据进行处理，以得到对应的数据变化率和数据相关性指标；标记单元，用于将得到的所述数据变化率和数据相关性指标与预设的阈值进行比较，对超过阈值的数据所对应的数据包进行标记；传输单元，用于对所标记的数据包进行优先传输；其有益效果是：通过对所采集的各数据包中的数据变化率和数据相关性指标进行获取，将超过阈值的数据包进行标记，使得差异较大的数据得到优先传输，进而利于后续的数据处理，提升数据融合的性能。融合的性能。融合的性能。

【技术实现步骤摘要】
一种基于物联网和大数据的数据传输系统、方法及介质


[0001]本专利技术涉及数据传输
，具体涉及一种基于物联网和大数据的数据传输系统、方法及介质。

技术介绍

[0002]在大数据应用系统中，前端连接有部署在物联网上的各种传感器和采集设备，然后将其采集的数据通过通信链路传输到处理中心，以便于后续的系统进行数据的融合关联和挖掘。但由于数据量的巨大，也带来了数据传输的压力。目前，现有技术均是考虑如何提升传输效率出发，并未考虑到基于需传输数据本身的特点，以及利于后续数据进行融合的角度进行传输。例如，传输了大量同类型数据，进而造成在后续的数据处理过程中，数据融合性能不高的缺陷。

技术实现思路

[0003]针对现有技术中的技术缺陷，本专利技术实施例的目的在于提供一种基于物联网和大数据的数据传输系统、方法及介质，以克服现有技术中数据融合性能不高的缺陷。
[0004]为实现上述目的，第一方面，本专利技术实施例提供了一种基于物联网和大数据的数据传输系统，所述系统包括：
[0005]采集单元，用于多样性的数据采集；其中，所采集本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于物联网和大数据的数据传输系统，其特征在于，所述系统包括：采集单元，用于多样性的数据采集；其中，所采集的数据具有时间和相关性特征；预处理单元，用于将所述采集单元所采集的数据按预设周期进行打包以形成数据包，并对各数据包中的数据进行处理，以得到对应的数据变化率和数据相关性指标；标记单元，用于将得到的所述数据变化率和数据相关性指标与预设的阈值进行比较，对超过阈值的数据所对应的数据包进行标记；传输单元，用于：对所标记的数据包进行优先传输；以及对传输的数据包进行压缩处理后再进行传输。2.如权利要求1所述的一种基于物联网和大数据的数据传输系统，其特征在于，所述预处理单元还用于：将所采集的数据划分为实时数据和非实时数据。3.如权利要求1或2所述的一种基于物联网和大数据的数据传输系统，其特征在于，所述预处理单元还用于：计算各数据包之间数据的相似度；同时，所述标记单元还将相似度低的数据包进行标记。4.如权利要求3所述的一种基于物联网和大数据的数据传输系统，其特征在于，所述传输单元还用于：分别为每个数据包设定传输时间；且在传输时，若超过所述传输时间则将对应的数据包进行留存，并在链路空闲时进行再次发送。5.一种基于物联网和大数据的数据传输方法，其特征在于，应用于权利要求1所述的一种基于物联网和大数据的数据传输系统，所述方法包括：进行多样...

【专利技术属性】
技术研发人员：梁猛，
申请(专利权)人：浙江齐安信息科技有限公司，
类型：发明
国别省市：