一种处理分布式存储端到端流量分析的方法技术

本发明专利技术公开了一种处理分布式存储端到端流量分析的方法，属于云计算技术领域。本发明专利技术的处理分布式存储端到端流量分析的方法，定时采集客户端进程的链路关系，交换机周期内监听端口的链路数据并发送链路数据到采集服务器，采集服务器汇总周期内的链路数据存入关系数据库，前端Web服务器进行应用到硬盘的端到端展示。该发明专利技术的处理分布式存储端到端流量分析的方法对应用服务产生的影响较小，并且效率较高，具有很好的推广应用价值。

A method for processing end to end traffic analysis of distributed storage

The invention discloses a method for processing end-to-end traffic analysis of distributed storage, belonging to the technical field of cloud computing. The present invention deals with end-to-end traffic analysis of distributed storage, collects link relationships of client processes regularly, monitors link data of ports and sends link data to the acquisition server during the switch cycle, collects link data during the aggregation cycle of the server and stores the link data in the relational database, and applies the front-end Web server. To the hard disk's end-to-end display. The method of dealing with end-to-end traffic analysis of distributed storage has little impact on Application services, and has high efficiency, and has good application value.

【技术实现步骤摘要】
一种处理分布式存储端到端流量分析的方法
本专利技术涉及云计算
，具体提供一种处理分布式存储端到端流量分析的方法。
技术介绍
在大数据、云计算应用场景中，分布式存储由于高可靠和便于横向扩展的特点得到了大规模的应用。随着分布式存储的容量不断扩展和性能的不断加强，分布式存储网络架构日趋复杂，应用场景不断丰富。监控每个应用服务的存储质量，能够提供给云计算中心存储安全运行服务的数据需求比较突出。端到端的流量分析可以展示应用的数据流向和数据存储分布情况，当存储集群发生故障时，可以确定故障的影响范围。研发人员可以根据数据的流量和数据分布来优化集群，提高整个集群的利用率，根据集群软件和硬件的状态信息，提前告警或者采取更换组件等措施，提高集群的可靠性。运维人员通过端到端的数据流向可以分析当前存储服务状态和质量。市场规划者可以通过报表数据，分析不同应用对存储的要求来制定市场策略。但是，现有技术中仍缺少有效的端到端流量分析的方法。
技术实现思路
本专利技术的技术任务是针对上述存在的问题，提供一种对应用服务产生的影响较小，并且效率较高的处理分布式存储端到端流量分析的方法。为实现上述目的，本专利技术提供了如本文档来自技高网...

【技术保护点】
1.一种处理分布式存储端到端流量分析的方法，其特征在于：所述端到端流量分析的方法定时采集客户端进程的链路关系，交换机周期内监听物理端口的链路数据并发送链路数据到采集服务器，采集服务器汇总周期内的链路数据存入关系数据库，前端Web服务器进行应用到硬盘的端到端展示，具体步骤如下：S1：定时采集客户端进程的链路关系；S2：交换机周期内监听物理端口的链路数据并发送链路数据到采集服务器；S3：采集服务器汇总周期内的链路数据存入关系数据库；S4：前端Web服务器进行应用到硬盘的端到端展示。

【技术特征摘要】
1.一种处理分布式存储端到端流量分析的方法，其特征在于：所述端到端流量分析的方法定时采集客户端进程的链路关系，交换机周期内监听物理端口的链路数据并发送链路数据到采集服务器，采集服务器汇总周期内的链路数据存入关系数据库，前端Web服务器进行应用到硬盘的端到端展示，具体步骤如下：S1：定时采集客户端进程的链路关系；S2：交换机周期内监听物理端口的链路数据并发送链路数据到采集服务器；S3：采集服务器汇总周期内的链路数据存入关系数据库；S4：前端Web服务器进行应用到硬盘的端到端展示。2.根据权利要求1所述的处理分布式存储端到端流量分析的方法，其特征在于：步骤S1中定时采集客户端进程的链路关系包括周期内操作系统层采集客户端进程发起的所有通讯链路、周期内数据链路层采集应用服务器和存储服务器绑定IP的网卡与交换机物理端口的链接关系、周期内分布式存储采集所有存储服务进程的信息。3.根据权利要求1或2所述的处理分布式存储端到端流量分析的方法，其特征在于：每条链路包括通讯协议、发起端IP、发起端端口、接收端IP和接收端端口。4.根据权利要求3所述的处理分布式存储端到端流量分析的方法，其特征在于：所述通讯协议包括TCP和UDP。5.根据权利要求4所述的处理分布式存储端到端流量分析的方法，其特...

【专利技术属性】
技术研发人员：谢宇翔，祝乃国，
申请(专利权)人：山东汇贸电子口岸有限公司，
类型：发明
国别省市：山东,37