【技术实现步骤摘要】
本专利技术涉及信息采集,具体涉及一种大数据信息采集方法及系统。
技术介绍
1、大数据采集指的是通过各种方式收集大规模数据的过程,这些数据可以来自于互联网、传感器、移动设备等;大数据采集大致包括数据抓取、数据清洗、数据存储等步骤。
2、其中,传感器作为一种检测装置,能感受到被检测的信息,并能将检测到的信息按一定规律变换成信号或其他所需形式的信息输出,以满足信息的采集、传输、处理、存储、显示、记录等要求,信号类型包括iepe信号、电流信号、电压信号、脉冲信号、i/o信号、电阻变化信号等。由于传感器检测的信息存在多源、实时、海量、高噪声等特点,导致信息的通信和处理难度较大。
3、在进行信息采集时,由于传感器信息的噪声较高,又难以逐一对每条信息进行验证,导致部分无效信息将会一同被采集,对数据的分析结果造成影响;此外,由于传感器信息的实时性较高,信息根据传感器的检测频率不断生成,当某一传输链路发生异常时,则会导致后续多条信息同时缺失。
技术实现思路
1、为解决上述问题,本专利
...【技术保护点】
1.一种大数据信息采集方法,其特征在于,包括如下步骤:
2.根据权利要求1所述的大数据信息采集方法,其特征在于,每个传感器至少分配两个传感节点,传感节点生成信息限制量a1,传感器获取传感信息的数据量a2以及所属传感节点的信息限制量a1;当无a2<a1时,传感器将传感信息上传至任一所属的传感节点;当有a2<a1时,传感器将传感信息上传至a2<a1的传感节点。
3.根据权利要求2所述的大数据信息采集方法,其特征在于,当传感信息被上传至任一所属的传感节点且相邻传感信息的变化量小于变化阈值时,则将传感信息在各传感节点之间流转;当传感信
...【技术特征摘要】
1.一种大数据信息采集方法,其特征在于,包括如下步骤:
2.根据权利要求1所述的大数据信息采集方法,其特征在于,每个传感器至少分配两个传感节点,传感节点生成信息限制量a1,传感器获取传感信息的数据量a2以及所属传感节点的信息限制量a1;当无a2<a1时,传感器将传感信息上传至任一所属的传感节点;当有a2<a1时,传感器将传感信息上传至a2<a1的传感节点。
3.根据权利要求2所述的大数据信息采集方法,其特征在于,当传感信息被上传至任一所属的传感节点且相邻传感信息的变化量小于变化阈值时,则将传感信息在各传感节点之间流转;当传感信息被上传至a2<a1的传感节点且相邻传感信息的变化量小于变化阈值时,则将传感信息直接通过a2<a1的传感节点上传至储存模块。
4.根据权利要求1-3中任意一项所述的大数据信息采集方法,其...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。