一种大数据云存储服务器制造技术

本发明专利技术公开了一种大数据云存储服务器，涉及云存储技术领域，包括大数据中心，所述大数据中心通信连接有用户业务端口、数据处理模块、数据存储模块、数据验证模块以及数据修正模块；通过将所要存储的数据分解为若干个存储数据流，从而能够对较大的存储的数据进行分段校验，相比较传统数据存储方式，能够使得当存储的数据出现错误时，快速的排查出错误点，且由于每个存储数据流之间相互独立，即当某一个存储数据流出现错误时，只需要对该存储数据流内出现错误的点对应的数据内容进行修正，即可完成整个存储数据的校正，提高了数据存储效率的同时，降低了数据修正所需要的时间。降低了数据修正所需要的时间。降低了数据修正所需要的时间。

【技术实现步骤摘要】
一种大数据云存储服务器


[0001]本专利技术涉及云存储
，具体是一种大数据云存储服务器。

技术介绍

[0002]随着计算机和网路的不断发展及高清视频的普及，存储多媒体所需的空间不断的增长，传统的存储架构已经很难满足需求。云存储以其海量的存储空间、高可靠性、高并发、高可扩展性及高性价比等特性逐渐展露头角；数据在进行线上存储时，当所需要存储的数据过大时，在存储的过程中，容易造成数据缺失或发生错误，从而导致用户所提取到的数据存在缺失等异常，为此，现提供一种大数据云存储服务器。

技术实现思路

[0003]本专利技术的目的在于提供一种大数据云存储服务器。
[0004]本专利技术的目的可以通过以下技术方案实现：一种大数据云存储服务器，包括大数据中心，所述大数据中心通信连接有用户业务端口、数据处理模块、数据存储模块、数据验证模块以及数据修正模块；所述用户业务端口用于用户将所需要进行存储的数据上传至临时存储区间内；所述数据处理模块用于对临时存储区间内的数据进行处理，将临时存储区间内的数据转化为存储数据流，并完成对存储数据流的加密，获得加密数据流；所述数据验证模块用于用户提取数据的过程中，对所需要提取的数据进行验证，从而完成对加密数据流的解密，并对解密后的数据进行校验；所述数据修正模块用于对出现错误的存储数据流进行数据修正。
[0005]进一步的，所述用户业务端口用于用户进行个人信息注册，根据注册的个人信息获得用于登录用户业务端口的账户，通过账户进入至用户业务端口。
[0006]进一步的，所述用户上传数据的过程包括：建立临时存储区间，并设置临时数据传输通道，将临时存储区间与用户业务端口通过临时数据传输通道进行链接；将所需要进行存储的数据通过临时数据传输通道上传至临时存储区间内。
[0007]进一步的，所述数据处理模块对临时存储区间内的数据进行处理的过程包括：将临时存储区间内所需要进行存储的数据转化为数据流，并将所需要进行存储的数据所转化的数据流标记为原始数据流；将原始数据流分解为以k位单位帧为一组的数据流段，则原始数据流所获得的数据流段的数量；根据所获得的数据流段，分别生成对应的校验码，将校验码增加至相应数据流段的后面，形成新的数据流段，并将新的数据流段记为存储数据流。
[0008]进一步的，所述数据流段的数量为整数，且当数据流段的数量存在余数时，则将数据流段的数量的余数部分进行补0，从而余数部分的数据流段的单位帧数量为k，形成新的
数据流段。
[0009]进一步的，所述存储数据流的加密过程包括：获取用户业务服务端口的网络接口信息，并根据网络接口信息生成识别加密段，根据识别加密段生成识别解密密钥；通过识别加密段，对每个存储数据流进行加密，获得加密数据流，将加密数据流上传至数据存储模块内进行保存。
[0010]进一步的，所述数据验证模块对加密数据流进行解密的过程包括：用户在用户业务服务端口内选取所要提取的数据，在选定所要提取的数据后，获取所要提取的数据中的识别加密段，通过识别解密密钥对识别加密段进行解密；当识别解密密钥与识别加密段匹配时，则完成对所要提取的数据的解密，从而获得存储数据流。
[0011]进一步的，所述数据验证模块对存储数据流的校验过程包括：将所要提取的数据内的所有存储数据流进行标记，并获取每个存储数据流末尾a
‑
1位的单位帧组成的数据流段，将所获得的数据流段标记为对应存储数据流的校验码；将存储数据流除以用于获取存储数据流对应的校验码的二进制序列，并获得结果；若结果存在余数，则表示该存储数据流在传输过程中出现错误；若结果不存在余数，则表示该存储数据流在传输过程中没有出现错误。
[0012]进一步的，所述数据修正模块对出现错误的数据的修正过程包括：将所标记的有错误的存储数据流，并读取存储数据流内的所有单位帧以及对应的排序；获取存储数据流在分析过程中，所获得的二进制余数的位数，将存储数据流中由低位到高位排序的单位帧中，相应位置的单位帧进行标记；将所有单位帧依次进行变化；将变化后的存储数据流除以二进制序列，获取结果，当结果不存在余数时，则将对应的单位帧进行标记；获取所有被标记的单位帧信息，并返回数据存储模块；根据单位帧信息，获取单位帧对应的数据内容，并重新发送至临时存储区间；将数据内容对存储数据流中对应位置的单位帧的数据内容进行替换。
[0013]与现有技术相比，本专利技术的有益效果是：通过将所要存储的数据分解为若干个存储数据流，从而能够对较大的存储的数据进行分段校验，相比较传统数据存储方式，能够使得当存储的数据出现错误时，快速的排查出错误点，且由于每个存储数据流之间相互独立，即当某一个存储数据流出现错误时，只需要对该存储数据流内出现错误的点对应的数据内容进行修正，即可完成整个存储数据的校正，提高了数据存储效率的同时，降低了数据修正所需要的时间。
附图说明
[0014]图1为本专利技术的原理图。
具体实施方式
[0015]如图1所示，一种大数据云存储服务器，包括大数据中心，所述大数据中心通信连接有用户业务端口、数据处理模块、数据存储模块、数据验证模块以及数据修正模块；所述用户业务端口用于用户进行个人信息注册，根据注册的个人信息获得用于登录用户业务端口的账户，通过账户进入至用户业务端口；所述用户业务端口还用于用户将所需要进行存储的数据进行上传，用户上传数据的过程包括：建立临时存储区间，并设置临时数据传输通道，将临时存储区间与用户业务端口通过临时数据传输通道进行链接；将所需要进行存储的数据通过临时数据传输通道上传至临时存储区间内；需要进一步说明的是，在具体实施过程中，所述临时数据传输通道在完成对用户所需要进行传输的数据的传输后，则自动进行关闭。
[0016]所述数据处理模块用于对临时存储区间内的数据进行处理，具体处理过程包括：将临时存储区间内所需要进行存储的数据转化为数据流，并将所需要进行存储的数据所转化的数据流标记为原始数据流；所述数据流由若干二进制的单位帧组成；获取组成原始数据流的单位帧的帧数，并将原始数据流的单位帧的数量记为m；将原始数据流分解为以k位单位帧为一组的数据流段，则原始数据流所获得的数据流段的数量SJL，SJL=m/k；需要进一步说明的是，在具体实施过程中，SJL为整数，且当SJL存在余数时，则将SJL的余数部分进行补0，从而余数部分的数据流段的单位帧数量为k，形成新的数据流段；举例说明，当原始数据流为11000011001时，将原始数据流分解为4位单位帧为一组的数据流段，则分别获得数据流段1100,0011以及001，由于001数据流段的单位帧数量为3，则对001数据流段进行补0，获得数据流段0010，从而获得三个完整的数据流段1100,0011以及0001。
[0017]根据所获得的数据流段，分别生成对应的校验码，将校验码增加至相应数据流段的后面，形成新的数据流段，并将新的数据流段记为存储数据流；所述存储数据流的获取过程包括：设置CRC多项式，并根据CRC多项式获得二进制序列，并将二进制序本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种大数据云存储服务器，包括大数据中心，其特征在于，所述大数据中心通信连接有用户业务端口、数据处理模块、数据存储模块、数据验证模块以及数据修正模块；所述用户业务端口用于用户将所需要进行存储的数据上传至临时存储区间内；所述数据处理模块用于对临时存储区间内的数据进行处理，将临时存储区间内的数据转化为存储数据流，并完成对存储数据流的加密，获得加密数据流；所述数据验证模块用于用户提取数据的过程中，对所需要提取的数据进行验证，从而完成对加密数据流的解密，并对解密后的数据进行校验；所述数据修正模块用于对出现错误的存储数据流进行数据修正。2.根据权利要求1所述的一种大数据云存储服务器，其特征在于，所述用户业务端口用于用户进行个人信息注册，根据注册的个人信息获得用于登录用户业务端口的账户，通过账户进入至用户业务端口。3.根据权利要求2所述的一种大数据云存储服务器，其特征在于，所述用户上传数据的过程包括：建立临时存储区间，并设置临时数据传输通道，将临时存储区间与用户业务端口通过临时数据传输通道进行链接；将所需要进行存储的数据通过临时数据传输通道上传至临时存储区间内。4.根据权利要求3所述的一种大数据云存储服务器，其特征在于，所述数据处理模块对临时存储区间内的数据进行处理的过程包括：将临时存储区间内所需要进行存储的数据转化为数据流，并将所需要进行存储的数据所转化的数据流标记为原始数据流；将原始数据流分解为以k位单位帧为一组的数据流段，则原始数据流所获得的数据流段的数量；根据所获得的数据流段，分别生成对应的校验码，将校验码增加至相应数据流段的后面，形成新的数据流段，并将新的数据流段记为存储数据流。5.根据权利要求4所述的一种大数据云存储服务器，其特征在于，所述数据流段的数量为整数，且当数据流段的数量存在余数时，则将数据流段的数量的余数部分进行补0，从而余数部分的数据流段的单位帧数量为k，形成新的数据流段。6.根据权利要求4所述的一种大数据云存储服务器，其特征...

【专利技术属性】
技术研发人员：吴相庆，吴汝秋，肖毅，
申请(专利权)人：东莞市微三云大数据科技有限公司，
类型：发明
国别省市：