【技术实现步骤摘要】
一种用于IDC数据中心的网络数据监控方法及系统
[0001]本专利技术涉及大数据处理
，尤其涉及一种用于IDC数据中心的网络数据监控方法及系统。
技术介绍
[0002]互联网数据中心（Internet Data Center）简称IDC，为集中式收集、存储、处理和发送数据的设备提供运行维护的设施基地。IDC中一般包括多个服务器，例如，提供应用服务的应用服务节点和存储数据的数据存储节点等等。
[0003]数据在传输过程中有可能存在数据丢失、数据传输错误等影响到数据质量的问题，而数据质量的好坏对数据计算结果的正确性有着关键性作用，错误的数据计算结果可能导致根据数据计算结果产生失败的决策。若在将数据从应用服务节点传输到数据存储节点的过程中产生数据传输问题，那么进一步将已经发生错误的数据传输到数据仓库，不但会浪费网络带宽资源，更会导致产生错误的计算结果。
[0004]此外，大量网络数据需要存储在数据存储节点方便应用服务节点调用，但是由于数据存储节点内部存储的网络数据量过于庞大，目前针对IDC数据中心的网络数据监...
【技术保护点】
【技术特征摘要】
1.一种用于IDC数据中心的网络数据监控方法，其特征在于，包括：对IDC数据中心中所有服务器进行虚拟化，得到数据存储节点、应用服务节点和业务服务节点；截取所述数据存储节点往所述业务服务节点方向发送的第一存储发送数据包、所述业务服务节点接收从所述数据存储节点方向传来的第一业务接收数据包、所述应用服务节点往所述业务服务节点方向发送的应用发送数据包、所述业务服务节点接收从所述应用服务节点方向传来的第二业务接收数据包、所述数据存储节点往所述应用服务节点方向发送的第二存储发送数据包和所述应用服务节点接收从所述数据存储节点方向传来的应用接收数据包；对所述第二存储发送数据包进行漂移性变化分析、周期性变化分析、时序平稳性分析，得到所述第二存储发送数据包的偏度；根据所述偏度的大小选用异常检测算法确认所述数据存储节点中网络数据的异常性；分别比较所述第一存储发送数据包和所述第一业务接收数据包、所述应用发送数据包和所述第二业务接收数据包、所述第二存储发送数据包和所述应用接收数据包的时间戳和数据一致性，得到所述数据存储节点与所述业务服务节点之间、所述应用服务节点与所述业务服务节点之间、所述数据存储节点与所述应用服务节点之间的数据传输速度与质量。2.如权利要求1所述用于IDC数据中心的网络数据监控方法，其特征在于，所述对所述第二存储发送数据包进行漂移性变化分析、周期性变化分析、时序平稳性分析，得到所述第二存储发送数据包的偏度，具体为：对所述第二存储发送数据包进行漂移性变化分析；若所述第二存储发送数据包存在漂移，根据检测获得的漂移点切割所述第二存储发送数据包；若所述第二存储发送数据包存在漂移，使所述第二存储发送数据包保持不变；对所述第二存储发送数据包进行周期性变化分析和时序平稳性分析；若所述第二存储发送数据包不存在周期性或者所述第二存储发送数据包满足平稳性检验，计算所述第二存储发送数据包的偏度。3.如权利要求2所述用于IDC数据中心的网络数据监控方法，其特征在于，所述对所述第二存储发送数据包进行周期性变化分析和时序平稳性分析之后，还包括：若所述第二存储发送数据包存在周期性，按照周期跨度对所述第二存储发送数据进行切割，得到多段等长的第二存储发送数据段；计算所述第一存储发送数据段的偏度，并将所述第二存储发送数据段的偏度作为所述第二存储发送数据包的偏度。4.如权利要求2所述用于IDC数据中心的网络数据监控方法，其特征在于，所述对所述第二存储发送数据包进行漂移性变化分析，具体包括：根据给定窗口的大小，提取所述给定窗口内的中位数来获取第二存储发送数据包的第一趋势成分；根据所述第一趋势成分对所述第二存储发送数据包进行平滑处理；平滑处理后的所述第二存储发送数据包为递增数据包或者递减数据包，判断所述第二存储发送数据包不存在漂移；若当前样本点左边数据包的最大值小于当前样本点右边数据包的最小值，判断所述第
二存储发送数据包存在突增漂移；若当前样本点左边数据包的最小值大于当前样本点右边数据包的最大值，判断所述第二存储发送数据包存在突降漂移。5.如权利要求2所述用于IDC数据中心的网络数据监控方法，其特征在于，所述对所述第二存储发送数据包进行周期性变化分析，具体包括：提取所述第二存储...
【专利技术属性】
技术研发人员：兰满桔，吴俊刚，赵伟锋，张宇文，
申请(专利权)人：广州尚航信息科技股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。