一种多路数据分类式大数据采集方法技术

技术编号:24357419 阅读:30 留言:0更新日期:2020-06-03 02:51
本发明专利技术涉及大数据采集技术领域,具体为一种多路数据分类式大数据采集方法,包括采集前端数据、数据上传、数据分类、数据传输和建立数据库步骤。该多路数据分类式大数据采集方法中,通过在前端设置多个数据采集节点,并通过多个数据采集节点对前端数据进行实时采集,建立完整的前端数据采集系统,采集节点采集的数据通过无线传输形式将数据传输至接收分机内,减少线路铺设,降低前期投资成本,同时数据采集高效,速率快,通过分类算法将采集节点采集的数据进行分类,并保持在传输分机内,实现数据集约化保存,为建立数据库打好基础,同时分类传输,能够减少系统负载运行,进一步提高整体效率。

A multi-channel data classification big data acquisition method

【技术实现步骤摘要】
一种多路数据分类式大数据采集方法
本专利技术涉及大数据采集
,具体为一种多路数据分类式大数据采集方法。
技术介绍
大数据信息技术与我们的生活密切相关,无论是物联物流领域、网络社交领域、电子商务领域、远程医疗领域等都可以看到大数据信息技术的缩影。现有的采集数据的传输大多采用有线方式,且数据采集系统不完整,无法形成前端采集系统,随着前端数据采集的增多,采用有线方式传输,需要铺设大量的线缆,导致前期投资成本大,同时,在前端数据采集后,直接将采集的各种数据存入云端数据库内,在数据库中进行池化分类,但由于数据库中,数据信息过大,无论是数据的上传还是数据的分类,都会造成系统负载运行,导致数据库建立效率低。鉴于此,我们提出一种多路数据分类式大数据采集方法。
技术实现思路
本专利技术的目的在于提供一种多路数据分类式大数据采集方法,以解决上述
技术介绍
中提出的采用有线方式传输,需要铺设大量的线缆,导致前期投资成本大和由于数据库中,数据信息过大,无论是数据的上传还是数据的分类,都会造成系统负载运行的问题。为实现上述目的,本专利技术提本文档来自技高网...

【技术保护点】
1.一种多路数据分类式大数据采集方法,其特征在于:包括以下步骤:/nS1、采集前端数据:在前端设置多个数据采集节点,并通过多个数据采集节点对前端数据进行实时采集;/nS2、数据上传:将采集节点采集的数据统一传输至接收分机内;/nS3、数据分类:通过接收分机对采集节点采集的数据进行分类;/nS4、数据传输:按照采集数据不同的分类结果,传输至对应的传输分机中,并对数据进行保存;/nS5、建立数据库:将不同传输分机储存的数据上传至云端数据库,并建立总数据库。/n

【技术特征摘要】
1.一种多路数据分类式大数据采集方法,其特征在于:包括以下步骤:
S1、采集前端数据:在前端设置多个数据采集节点,并通过多个数据采集节点对前端数据进行实时采集;
S2、数据上传:将采集节点采集的数据统一传输至接收分机内;
S3、数据分类:通过接收分机对采集节点采集的数据进行分类;
S4、数据传输:按照采集数据不同的分类结果,传输至对应的传输分机中,并对数据进行保存;
S5、建立数据库:将不同传输分机储存的数据上传至云端数据库,并建立总数据库。


2.根据权利要求1所述的多路数据分类式大数据采集方法,其特征在于:所述采集节点包括采集模块、信号调理模块、采样保持模块、A/D转化模块和单片机模块;所述采集模块用于采集前端数据;所述信号调理模块用于将各个传感器的模拟输出分别进行信号变换,使之适应模/数转换器输入端对输入信号的要求;所述采样保持模块用于将连续信号转化为断续的采样信号,再将断续的采样信号转化为连续信号;所述A/D转化模块用于将模拟量信号转换为数字量信号;所述单片机模块用于...

【专利技术属性】
技术研发人员:金龙飞吴小邦陶波
申请(专利权)人:南京陶特思软件科技有限公司
类型:发明
国别省市:江苏;32

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1