一种多通道大数据存储方法及其系统技术方案

本发明专利技术公开了一种多通道大数据存储方法，该方法包括以下步骤：S1、采集数据信息；S2、计算采集的数据信息的字节数；S3、根据字节数计算结果，对字节数较大的数据信息进行拆分传输；S4、拆分后的数据信息进行分路同时传输，并对分路传输后的数据信息进行多通道同时存储。本发明专利技术还公开了一种多通道大数据存储系统，包括MCU处理器、采集前端设备的数据信息的数据采集模块、计算分析数据信息的字节数的数据分析模块、比对字节数和分路传输阈值的数据比对模块、对字节数较大的数据信息进行拆分的数据拆分模块、数据进行通信的数据通信模块和进行数据存储的数据存储模块。本发明专利技术的多通道大数据存储方法及其系统，具有高速的数据传输和存储速度。

A multi channel large data storage method and its system

The invention discloses a multi-channel large data storage method, which comprises the following steps: S1, acquisition of data information; S2, calculation of the number of bytes of collected data information; S3, data information with larger bytes is split and transmitted according to the calculation result of byte number; S4, data information after splitting is transmitted simultaneously. Transmission, and multi-channel simultaneous storage of data transmitted after transmission. The invention also discloses a multi-channel large data storage system, which includes a MCU processor, a data acquisition module for data acquisition of front-end equipment, a data analysis module for calculating and analyzing the number of bytes of data information, a data comparison module for comparing the number of bytes and the threshold of shunt transmission, and a data information with a larger number of bytes. The data splitting module, the data communication module and the data storage module for data storage are separated. The multi-channel large data storage method and system of the invention have high data transmission and storage speed.

【技术实现步骤摘要】
一种多通道大数据存储方法及其系统
本专利技术涉及数据传输和存储
，具体是一种多通道大数据存储方法及其系统。
技术介绍
随着互联网技术的广泛应用，在科技行业，以及传统行业与互联网行业的结合的大背景下，各个行业的数据的增长呈现指数级，这些数据含有宝贵的价值，而在数据进行显示时需要进行加载处理，所以如何快速对数据信息进行加载显得尤为重要。现有技术CN107391023A提供了一种多通道数据存储器及其存取方法及装置，其中所述方法包括：确定待存储的第一数据块，所述第一数据块是由第一通道接收到的数据块；确定所述多通道数据存储器的随机存取存储器RAM的第一存储信息，所述多通道数据存储器至少包括第一通道、第二通道以及第一通道和第二通道共享的RAM；根据所述第一存储信息在所述RAM上为所述第一数据块分配第一存储空间；将所述第一数据块写入所述第一存储空间。该技术优点在于通过多通道对数据进行存储，加快了数据存储的速度。但在数据处理过程中，仅通过对数据存储进行多通道处理，对数据处理速度的提升不足以应对当前互联网环境的和用户的需求。
技术实现思路
本专利技术的目的在于提供一种多通道大数据存储方法及其系统，以解决上述
技术介绍
中提出的现有数据多通道存储对互联网数据处理速度提升不足的问题。为实现上述目的，本专利技术提供如下技术方案：一种多通道大数据存储方法，该方法包括以下步骤：S1、采集数据信息；S2、计算采集的数据信息的字节数；S3、根据字节数计算结果，对字节数较大的数据信息进行拆分传输；S4、拆分后的数据信息进行分路同时传输，并对分路传输后的数据信息进行多通道同时存储。优选的，所述S1包括通过数据采集模块对前端设备的数据信息进行采集。优选的，所述S2包括通过数据分析模块对数据信息的字节数进行计算，并根据数据比对模块判断数据信息的字节数是否到达分路传输的阈值。优选的，所述S3包括通过数据拆分模块对字节数较大的数据信息进行拆分。优选的，所述S4包括通过数据通信模块对数据信息进行传输，并通过数据存储模块对传输后的数据信息进行存储。一种多通道大数据存储系统，包括：MCU处理器、数据采集模块、数据分析模块、数据比对模块、数据拆分模块、数据通信模块和数据存储模块；所述MCU处理器作为数据存储系统的控制中心；所述数据采集模块用于采集前端设备的数据信息，所述数据分析模块用于计算分析数据信息的字节数，所述数据比对模块用于比对字节数和分路传输阈值，所述数据拆分模块用于对字节数较大的数据信息进行拆分，所述数据通信模块用于数据进行通信，所述数据存储模块用于进行数据存储；所述数据采集模块和数据分析模块通讯连接，所述数据分析模块和数据比对模块通讯连接，所述数据比对模块和数据拆分模块通讯，所述数据拆分模块和数据存储模块通讯连接，所述数据存储模块和MCU处理器通讯连接。优选的，所述数据通信模块包括I2C通讯单元、CAN通讯单元和GPRS通讯单元，所述数据存储模块通过I2C通讯单元通讯连接MCU处理器进行数据读写，所述所述数据拆分模块通过GPRS通讯单元通讯连接数据存储模块，所述数据采集模块通过CAN通讯单元通讯连接数据分析模块，所述数据分析模块通过CAN通信管单元通讯连接数据比对模块，所述数据比对模块通过CAN通讯单元通讯连接数据拆分模块。优选的，该系统还包括前端设备，所述数据采集模块电性连接诶前端设备用于读取前端设备的数据信息。与现有技术相比，本专利技术的有益效果是：本专利技术通过数据信息字节数的计算对字节数较大的数据进行拆分并将拆分后的数据进行分路同时传输，实现了数据存储过程中传输速度的提升；本专利技术通分路传输的数据进行多通道存储，采用多模块对应多种不同通讯方式进行通讯，降低硬件工作压力，提高数据传输速度和存储速度。附图说明图1为本专利技术一种多通道大数据存储方法的方法流程图；图2为本专利技术一种多通道大数据存储系统的结构框图；图3为本专利技术一种多通道大数据存储系统数据通信模块的结构框图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。请参阅图1-3如图1所示，一种多通道大数据存储方法，该方法包括以下步骤：S1、通过数据采集模块对前端设备的数据信息进行采集。S2、通过数据分析模块对数据信息的字节数进行计算，并根据数据比对模块判断数据信息的字节数是否到达分路传输的阈值。S3、根据字节数计算结果，对字节数较大的数据信息通过数据拆分模块进行拆分传输。S4、拆分后的数据信息通过数据通信模块对数据信息进行分路同时传输，并通过数据存储模块对传输后的数据信息进行多通道同时存储。如图2所示，一种多通道大数据存储系统，包括：MCU处理器、数据采集模块、数据分析模块、数据比对模块、数据拆分模块、数据通信模块、数据存储模块和前端设备。数据采集模块电性连接诶前端设备用于读取前端设备的数据信息。MCU处理器作为数据存储系统的控制中心；数据采集模块用于采集前端设备的数据信息，数据分析模块用于计算分析数据信息的字节数，数据比对模块用于比对字节数和分路传输阈值，数据拆分模块用于对字节数较大的数据信息进行拆分，数据通信模块用于数据进行通信，数据存储模块用于进行数据存储。数据采集模块和数据分析模块通讯连接，数据分析模块和数据比对模块通讯连接，数据比对模块和数据拆分模块通讯，数据拆分模块和数据存储模块通讯连接，数据存储模块和MCU处理器通讯连接。如图3所示，数据通信模块包括I2C通讯单元、CAN通讯单元和GPRS通讯单元，数据存储模块通过I2C通讯单元通讯连接MCU处理器进行数据读写，数据拆分模块通过GPRS通讯单元通讯连接数据存储模块，数据采集模块通过CAN通讯单元通讯连接数据分析模块，数据分析模块通过CAN通信管单元通讯连接数据比对模块，数据比对模块通过CAN通讯单元通讯连接数据拆分模块。尽管已经示出和描述了本专利技术的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本专利技术的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本专利技术的范围由所附权利要求及其等同物限定。本文档来自技高网...

【技术保护点】
1.一种多通道大数据存储方法，其特征在于，该方法包括以下步骤：S1、采集数据信息；S2、计算采集的数据信息的字节数；S3、根据字节数计算结果，对字节数较大的数据信息进行拆分传输；S4、拆分后的数据信息进行分路同时传输，并对分路传输后的数据信息进行多通道同时存储。

【技术特征摘要】
1.一种多通道大数据存储方法，其特征在于，该方法包括以下步骤：S1、采集数据信息；S2、计算采集的数据信息的字节数；S3、根据字节数计算结果，对字节数较大的数据信息进行拆分传输；S4、拆分后的数据信息进行分路同时传输，并对分路传输后的数据信息进行多通道同时存储。2.根据权利要求1所述的一种多通道大数据存储方法，其特征在于，所述S1包括通过数据采集模块对前端设备的数据信息进行采集。3.根据权利要求1所述的一种多通道大数据存储方法，其特征在于，所述S2包括通过数据分析模块对数据信息的字节数进行计算，并根据数据比对模块判断数据信息的字节数是否到达分路传输的阈值。4.根据权利要求1所述的一种多通道大数据存储方法，其特征在于，所述S3包括通过数据拆分模块对字节数较大的数据信息进行拆分。5.根据权利要求1所述的一种多通道大数据存储方法，其特征在于，所述S4包括通过数据通信模块对数据信息进行传输，并通过数据存储模块对传输后的数据信息进行存储。6.一种多通道大数据存储系统，其特征在于，包括：MCU处理器、数据采集模块、数据分析模块、数据比对模块、数据拆分模块、数据通信模块和数据存储模块；所述MCU处理器作为数据存储系统的控制中心...

【专利技术属性】
技术研发人员：陈珺，
申请(专利权)人：安徽雷索信息科技有限公司，
类型：发明
国别省市：安徽,34