大数据一体机制造技术

本发明专利技术提供了大数据一体机，该大数据一体机通过物联网络来连接数据存储模块的若干数据存储节点与数据计算模块的若干数据计算节点，其能够有效地保证不同数据流和不同指令流能够快速地和准确地传送到相应的节点区域中，以保证目标数据可被高效地处理，此外，该大数据一体机还能够对数据存储模块的若干数据存储节点与数据计算模块的若干数据计算节点进行关于数据流和/或指令流的安全监控处理，以提高一体机的整体数据安全性和避免一体机受到攻击，该大数据一体机能够根据其内部的物联网络状态和/或数据安全性状态进行相应的数据调度处理，从而提高大数据一体机的工作稳定性和安全性。

【技术实现步骤摘要】
大数据一体机
本专利技术涉及大数据处理的
，特别涉及大数据一体机。
技术介绍
随着电子信息技术和云端数据处理技术的发展，互联网数据的数据量不仅呈现爆发式的增长，并且互联网数据的数据类型也越来越多以及数据结构也越来越复杂。随着互联网数据的快速发展变化，传统的数据处理系统和数据处理模式已经无法满足大数据时代对数据处理在速度和精度上的要求。为了适应大数据时代对数据处理的新要求，现有技术已经提出了大数据一体机，该大数据一体机是将大数据存储和大数据计算集成一体的平台，其是为特定的应用领域而专门设计的设备，并且能够针对特定的应用领域进行集中优化和提供完整的大数据解决方案。虽然大数据一体机具有数据处理效率高、速度快和精准高的优点，但是目前大数据一体机依然存在数据网络布局结构过于复杂、大数据局一体家软件和硬件性能不稳定、数据容易丢失、易受攻击和数据安全性得不到有效保证的问题，这都严重地制约大数据一体机的推广应用。
技术实现思路
针对现有技术存在的缺陷，本专利技术提供大数据一体机，该大数据一体机包括数据存储模块、数据计算模块、数据物联网络模块、数据安全模块和数据调度模块：其中，该数据存储模块用于提供若干个数据存储节点；该数据计算模块用于提供若干个数据计算节点；该数据物联网络模块用于对该数据存储模块和该数据计算模块进行关于物联网络的通信连接；该数据安全模块用于对该数据存储模块和/或该数据计算模块中的数据流和/或指令流进行安全监控处理；该数据调度模块用于根据该数据物联网络模块和/或该数据安全模块的工作状态，对该大数据一体机进行适应的数据调度处理；可见，该大数据一体机通过物联网络来连接数据存储模块的若干数据存储节点与数据计算模块的若干数据计算节点，其能够有效地保证不同数据流和不同指令流能够快速地和准确地传送到相应的节点区域中，以保证目标数据可被高效地处理，此外，该大数据一体机还能够对数据存储模块的若干数据存储节点与数据计算模块的若干数据计算节点进行关于数据流和/或指令流的安全监控处理，以提高一体机的整体数据安全性和避免一体机受到攻击，该大数据一体机能够根据其内部的物联网络状态和/或数据安全性状态进行相应的数据调度处理，从而提高大数据一体机的工作稳定性和安全性。本专利技术提供大数据一体机，其特征在于：所述大数据一体机包括数据存储模块、数据计算模块、数据物联网络模块、数据安全模块和数据调度模块：其中，所述数据存储模块用于提供若干个数据存储节点；所述数据计算模块用于提供若干个数据计算节点；所述数据物联网络模块用于对所述数据存储模块和所述数据计算模块进行关于物联网络的通信连接；所述数据安全模块用于对所述数据存储模块和/或所述数据计算模块中的数据流和/或指令流进行安全监控处理；所述数据调度模块用于根据所述数据物联网络模块和/或所述数据安全模块的工作状态，对所述大数据一体机进行适应的数据调度处理；进一步，所述数据存储模块包括第一数据流监测子模块、第一指令流监测子模块、存储节点子模块和存储节点管理子模块；其中，所述存储节点子模块用于提供若干个所述数据存储节点，以对目标数据进行分布式节点存储处理；所述第一数据流监测子模块用于监测每一个数据存储节点对应的数据流量信息和/或数据流速信息；所述第一指令流监测子模块用于监测每一个数据存储节点对应的指令流传送区间信息和/或指令流传送时序信息；所述存储节点管理子模块用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流传送时序信息中的至少一者，调整每一个数据存储节点的数据存储状态；进一步，所述存储节点子模块包括若干个数据存储节点单元和存储节点调整单元；其中，所述每一个数据存储节点单元用于提供进行所述分布式节点存储处理的数据存储元；所述存储节点调整单元用于调整不同数据存储节点单元相互之间的连接关系，以实现对所述数据存储元的任意物理组合处理；或者，所述第一数据流监测子模块包括第一数据流信息获取单元和第一数据流速信息获取单元；其中，所述第一数据流信息获取单元用于获取每一个数据存储节点对应的数据流量信息；所述第一数据流速信息获取单元用于获取每一个数据存储节点对应的数据流速信息；或者，所述第一指令流监测子模块包括第一传送区间信息获取单元和第一传送时序信息获取单元；其中，所述第一传送区间信息获取单元用于获取每一个数据存储节点对应的指令流传送区间信息；所述第一传送时序信息获取单元用于获取每一个数据存储节点对应的指令流传送时序信息；或者，所述存储节点管理子模块包括存储节点状态确定单元和存储节点状态调整单元；其中，所述存储节点状态确定单元用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流传送时序信息中的至少一者，确定每一个数据存储节点当前的数据存储状态；所述存储节点状态调整单元用于根据所述当前的数据存储状态与期望数据存储状态之间的状态差异，实时调整每一个数据存储节点的数据存储状态；进一步，所述数据计算模块包括第二数据流监测子模块、第二指令流监测子模块、计算节点子模块和计算节点管理子模块；其中，所述计算节点子模块用于提供若干个所述数据计算节点，以对目标数据进行并行式节点计算处理；所述第二数据流监测子模块用于监测每一个数据计算节点对应的数据流量信息和/或数据流速信息；所述第二指令流监测子模块用于监测每一个数据计算节点对应的指令流传送区间信息和/或指令流传送时序信息；所述计算节点管理子模块用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流传送时序信息中的至少一者，调整每一个数据计算节点的数据计算状态；进一步，所述计算节点子模块包括若干个数据计算节点单元和计算节点调整单元；其中，所述每一个数据计算节点单元用于提供进行所述并行式节点计算处理的数据计算元；所述计算节点调整单元用于调整不同数据计算节点单元相互之间的运算层面关系，以实现对所述数据计算元的任意物理组合处理；或者，所述第二数据流监测子模块包括第二数据流信息获取单元和第二数据流速信息获取单元；其中，所述第二数据流信息获取单元用于获取每一个数据计算节点对应的数据流量信息；所述第二数据流速信息获取单元用于获取每一个数据计算节点对应的数据流速信息；或者，所述第二指令流监测子模块包括第二传送区间信息获取单元和第二传送时序信息获取单元；其中，所述第二传送区间信息获取单元用于获取每一个数据计算节点对应的指令流传送区间信息；所述第二传送时序信息获取单元用于获取每一个数据计算节点对应的指令流传送时序信息；或者，所述计算节点管理子模块包括计算节点状态确定单元和计算节点状态调整单元；其中，所述计算节点状态确定单元用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流本文档来自技高网...

【技术保护点】
1.大数据一体机，其特征在于：/n所述大数据一体机包括数据存储模块、数据计算模块、数据物联网络模块、数据安全模块和数据调度模块：其中，/n所述数据存储模块用于提供若干个数据存储节点；/n所述数据计算模块用于提供若干个数据计算节点；/n所述数据物联网络模块用于对所述数据存储模块和所述数据计算模块进行关于物联网络的通信连接；/n所述数据安全模块用于对所述数据存储模块和/或所述数据计算模块中的数据流和/或指令流进行安全监控处理；/n所述数据调度模块用于根据所述数据物联网络模块和/或所述数据安全模块的工作状态，对所述大数据一体机进行适应的数据调度处理。/n

【技术特征摘要】
1.大数据一体机，其特征在于：
所述大数据一体机包括数据存储模块、数据计算模块、数据物联网络模块、数据安全模块和数据调度模块：其中，
所述数据存储模块用于提供若干个数据存储节点；
所述数据计算模块用于提供若干个数据计算节点；
所述数据物联网络模块用于对所述数据存储模块和所述数据计算模块进行关于物联网络的通信连接；
所述数据安全模块用于对所述数据存储模块和/或所述数据计算模块中的数据流和/或指令流进行安全监控处理；
所述数据调度模块用于根据所述数据物联网络模块和/或所述数据安全模块的工作状态，对所述大数据一体机进行适应的数据调度处理。


2.如权利要求1所述的大数据一体机，其特征在于：
所述数据存储模块包括第一数据流监测子模块、第一指令流监测子模块、存储节点子模块和存储节点管理子模块；其中，
所述存储节点子模块用于提供若干个所述数据存储节点，以对目标数据进行分布式节点存储处理；
所述第一数据流监测子模块用于监测每一个数据存储节点对应的数据流量信息和/或数据流速信息；
所述第一指令流监测子模块用于监测每一个数据存储节点对应的指令流传送区间信息和/或指令流传送时序信息；
所述存储节点管理子模块用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流传送时序信息中的至少一者，调整每一个数据存储节点的数据存储状态。


3.如权利要求2所述的大数据一体机，其特征在于：
所述存储节点子模块包括若干个数据存储节点单元和存储节点调整单元；其中，
所述每一个数据存储节点单元用于提供进行所述分布式节点存储处理的数据存储元；
所述存储节点调整单元用于调整不同数据存储节点单元相互之间的连接关系，以实现对所述数据存储元的任意物理组合处理；
或者，
所述第一数据流监测子模块包括第一数据流信息获取单元和第一数据流速信息获取单元；其中，
所述第一数据流信息获取单元用于获取每一个数据存储节点对应的数据流量信息；
所述第一数据流速信息获取单元用于获取每一个数据存储节点对应的数据流速信息；
或者，
所述第一指令流监测子模块包括第一传送区间信息获取单元和第一传送时序信息获取单元；其中，
所述第一传送区间信息获取单元用于获取每一个数据存储节点对应的指令流传送区间信息；
所述第一传送时序信息获取单元用于获取每一个数据存储节点对应的指令流传送时序信息；
或者，
所述存储节点管理子模块包括存储节点状态确定单元和存储节点状态调整单元；其中，
所述存储节点状态确定单元用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流传送时序信息中的至少一者，确定每一个数据存储节点当前的数据存储状态；
所述存储节点状态调整单元用于根据所述当前的数据存储状态与期望数据存储状态之间的状态差异，实时调整每一个数据存储节点的数据存储状态。


4.如权利要求1所述的大数据一体机，其特征在于：
所述数据计算模块包括第二数据流监测子模块、第二指令流监测子模块、计算节点子模块和计算节点管理子模块；其中，
所述计算节点子模块用于提供若干个所述数据计算节点，以对目标数据进行并行式节点计算处理；
所述第二数据流监测子模块用于监测每一个数据计算节点对应的数据流量信息和/或数据流速信息；
所述第二指令流监测子模块用于监测每一个数据计算节点对应的指令流传送区间信息和/或指令流传送时序信息；
所述计算节点管理子模块用于根据所述数据流量信息、所述数据流速信息、所述指令流传送区间信息和所述指令流传送时序信息中的至少一者，调整每一个数据计算节点的数据计算状态。


5.如权利要求4所述的大数据一体机，其特征在于：
所述计算节点子模块包括若干个数据计算节点单元和计算节点调整单元；其中，
所述每一个数据计算节点单元用于提供进行所述并行式节点计算处理的数据计算元；
所述计算节点调整单元用于调整不同数据计算节点单元相互之间的运算层面关系，以实现对所述数据计算元的任意物理组合处理；
或者，
所述第二数据流监测子模块包括第二数据流信息获取单元和第二数据流速信息获取单元；其中，
所述第二数据流信息获取单元用于获取每一个数据计算节点对应的数据流量信息；
所述第二数据流速信息获取单元用于获取每一个数据计算节点对应的数据流速信息；
或者，
所述第二指令流监测子模块包括第二传送区间信息获取单元和第二传送时序信息获取单元；其中，
所述第二传送区间信息获取单元用于获取每一个数据计算节点对应的指令流传送区间信息；
所述第二传送时序信息获取单元用于获取每一个数据计算节点对应的指令流传送时序信息；
或者，
所述计算节点管理子模块包括计算节点状态确定单元和计算节点状态调整单元；...

【专利技术属性】
技术研发人员：陈恭祥，汪承刚，高进福，
申请(专利权)人：深圳市中盛瑞达科技有限公司，
类型：发明
国别省市：广东;44