一种大数据信息采集方法及系统技术方案

技术编号:42187732 阅读:27 留言:0更新日期:2024-07-30 18:39
本发明专利技术涉及信息采集技术领域,具体涉及一种大数据信息采集方法及系统,该方法,包括如下步骤:为传感器分配传感节点,通过传感节点接收覆盖的传感器检测的传感信息;根据传感器所检测的传感信息顺序生成信息序列,获取信息序列中相邻传感信息的变化量,当相邻传感信息的变化量低于变化阈值时,继续对传感信息进行上传;获取传感器所属传感节点的信息上传可行度,若传感器所属传感节点的信息上传可行度高于上传阈值,则通过传感器所属传感节点进行传感信息上传;将传感信息流转至信息上传可行度大于上传阈值的传感节点,并通过流转至的传感节点将传感信息上传至储存模块。本发明专利技术,能够高效、准确、完整的进行传感器数据采集。

【技术实现步骤摘要】

本专利技术涉及信息采集,具体涉及一种大数据信息采集方法及系统


技术介绍

1、大数据采集指的是通过各种方式收集大规模数据的过程,这些数据可以来自于互联网、传感器、移动设备等;大数据采集大致包括数据抓取、数据清洗、数据存储等步骤。

2、其中,传感器作为一种检测装置,能感受到被检测的信息,并能将检测到的信息按一定规律变换成信号或其他所需形式的信息输出,以满足信息的采集、传输、处理、存储、显示、记录等要求,信号类型包括iepe信号、电流信号、电压信号、脉冲信号、i/o信号、电阻变化信号等。由于传感器检测的信息存在多源、实时、海量、高噪声等特点,导致信息的通信和处理难度较大。

3、在进行信息采集时,由于传感器信息的噪声较高,又难以逐一对每条信息进行验证,导致部分无效信息将会一同被采集,对数据的分析结果造成影响;此外,由于传感器信息的实时性较高,信息根据传感器的检测频率不断生成,当某一传输链路发生异常时,则会导致后续多条信息同时缺失。


技术实现思路

1、为解决上述问题,本专利技术提供一种大数据信本文档来自技高网...

【技术保护点】

1.一种大数据信息采集方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的大数据信息采集方法,其特征在于,每个传感器至少分配两个传感节点,传感节点生成信息限制量a1,传感器获取传感信息的数据量a2以及所属传感节点的信息限制量a1;当无a2<a1时,传感器将传感信息上传至任一所属的传感节点;当有a2<a1时,传感器将传感信息上传至a2<a1的传感节点。

3.根据权利要求2所述的大数据信息采集方法,其特征在于,当传感信息被上传至任一所属的传感节点且相邻传感信息的变化量小于变化阈值时,则将传感信息在各传感节点之间流转;当传感信息被上传至a2<...

【技术特征摘要】

1.一种大数据信息采集方法,其特征在于,包括如下步骤:

2.根据权利要求1所述的大数据信息采集方法,其特征在于,每个传感器至少分配两个传感节点,传感节点生成信息限制量a1,传感器获取传感信息的数据量a2以及所属传感节点的信息限制量a1;当无a2<a1时,传感器将传感信息上传至任一所属的传感节点;当有a2<a1时,传感器将传感信息上传至a2<a1的传感节点。

3.根据权利要求2所述的大数据信息采集方法,其特征在于,当传感信息被上传至任一所属的传感节点且相邻传感信息的变化量小于变化阈值时,则将传感信息在各传感节点之间流转;当传感信息被上传至a2<a1的传感节点且相邻传感信息的变化量小于变化阈值时,则将传感信息直接通过a2<a1的传感节点上传至储存模块。

4.根据权利要求1-3中任意一项所述的大数据信息采集方法,其...

【专利技术属性】
技术研发人员:伍轶明
申请(专利权)人:广西科技大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1