基于多数据源的大规模无线局域网数据采集与处理方法技术

本发明专利技术公开了一种基于多数据源的大规模无线局域网数据采集与处理方法，包括以下步骤：步骤1，用DHCP数据处理采集与存储DCHP系统IP地址租约数据，得到终端类型数据；步骤2，用AAA认证数据处理采集与存储AAA认证系统用户认证数据，得到AAA结构化数据；步骤3，用SNMP数据处理采集网络设备、无线终端和无线干扰源的运行数据，并结合终端类型数据和用户认证数据一并处理，得到SNMP结构化数据；步骤4，用日志数据处理采集与存储NAT系统地址转换、DNS系统域名解析和AC的日志数据，得到日志结构化数据；步骤5，用SFLOW流量数据处理采集与存储SFLOW流量数据，得到SFLOW流量结构化数据；步骤6，将结构化数据存入无线网核心数据库；步骤7，将核心数据库输入智能运维系统。将核心数据库输入智能运维系统。将核心数据库输入智能运维系统。

【技术实现步骤摘要】
基于多数据源的大规模无线局域网数据采集与处理方法


[0001]本专利技术涉及智能运维领域，具体涉及一种基于多数据源的大规模无线局域网数据采集与处理方法。

技术介绍

[0002]随着无线局域网技术、移动终端设备和移动应用的不断改革与发展，WLAN已经不再作为有线网络的补充，而是成为了主要的网络接入方式。在家庭网络中，基于WLAN技术的WiFi网络已经完全替代有线网络，从个人电脑、手机、平板电脑等传统终端设备，到家用电器、传感器等物联网设备，再到电动汽车等新能源设备，都能通过家庭WiFi接入互联网。在园区范围的网络覆盖中，WLAN一般采用大规模部署和独立组网，包含数百至数万台设备，成为用户终端的主要网络接入方式。大规模无线网络系统建成以后，为了了解网络运行状况、监测网络性能，需要对网络进行管理、监控和测量，进而对无线网络系统进行优化和改进，更好的为用户终端提供高速稳定的服务。
[0003]智能运维AIOps是于2016年提出的概念，得益于科研人员在深度学习方面取得的巨大突破，智能运维已逐渐能够进行实际有效的应用。AIOps的核心技术就是大数本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.基于多数据源的大规模无线局域网数据采集与处理方法，其特征在于，包括以下步骤：步骤1，采用动态主机配置协议数据处理流程通过数据库访问采集与处理动态主机配置协议系统的互联网协议地址租约数据，得到终端类型数据；步骤2，采用AAA认证数据处理流程数据库访问采集与处理AAA认证系统的用户认证数据，得到用户认证数据和AAA结构化数据；步骤3，采用简单网络管理协议数据处理流程通过简单网络管理协议采集网络设备的运行数据、无线终端的运行数据和无线干扰源的运行数据，并结合所述动态主机配置协议数据处理流程输入的所述终端类型数据和所述AAA认证数据处理流程输入的所述用户认证数据一并进行处理和存储，得到简单网络管理协议结构化数据；步骤4，采用日志数据处理流程通过系统日志协议采集与处理网络地址转换系统的地址转换日志数据、域名系统的域名解析日志数据和无线控制器的日志数据，得到日志结构化数据；步骤5，采用SFLOW流量数据处理流程通过SFLOW协议采集与处理SFLOW流量数据，得到SFLOW流量结构化数据；步骤6，将所述AAA认证数据处理流程得到的所述AAA结构化数据、所述简单网络管理协议数据处理流程得到的所述简单网络管理协议结构化数据、所述日志数据处理流程得到的所述日志结构化数据以及所述SFLOW流量数据处理流程得到的所述SFLOW流量结构化数据存入无线网核心数据库；步骤7，将所述无线网核心数据库输入智能运维系统。2.根据权利要求1所述的基于多数据源的大规模无线局域网数据采集与处理方法，其特征在于：其中，步骤1中，所述动态主机配置协议数据处理流程包含动态主机配置协议、组织唯一标识符和Fingerbank三个子进程，具体包括以下子步骤：步骤1
‑
1，所述动态主机配置协议数据处理流程通过数据库访问采集所述动态主机配置协议系统的互联网协议地址租约数据，包括：包括互联网协议数据、介质访问控制层数据、租约时间、option55、option60、主机名称等；步骤1
‑
2，分别对终端进行本地匹配、与IEEE的所述组织唯一标识符进行匹配以及调用所述Fingerbank提供的CloudAPI进行匹配；步骤1
‑
3，识别终端类型数据，并将所述终端类型数据输入到所述简单网络管理协议数据处理流程。3.根据权利要求1所述的基于多数据源的大规模无线局域网数据采集与处理方法，其特征在于：其中，步骤2中，具体包括以下子步骤：步骤2
‑
1，所述AAA认证数据处理流程通过数据库访问采集所述AAA认证系统实时的上网明细数据；步骤2
‑
2，对数据清洗和生成新字段得到所述用户认证数据和所述AAA结构化数据；步骤2
‑
3，将所述用户认证数据输入到所述简单网络管理协议数据处理进程，将所述AAA结构化数据存储到所述无线网核心数据库。
4.根据权利要求1所述的基于多数据源的大...

【专利技术属性】
技术研发人员：向望，徐竟祎，沈敏虎，沈佳杰，万俨慧，李炜莹，赵泽宇，王新，
申请(专利权)人：复旦大学，
类型：发明
国别省市：