实现Hadoop平台参数动态调优的web系统、方法技术方案

本发明专利技术属于开源Hadoop平台参数动态调优技术领域，具体提供实现Hadoop平台参数动态调优的web系统、方法，所述系统包括web界面，用于通过列表实现对Hadoop平台的配置文件、服务组件以及部署Hadoop平台的服务器信息进行维护，并提供与管理后台通信的用于分别对配置文件、服务组件以及服务器信息进行编辑的添加按钮、修改按钮和删除按钮；管理后台接收到编辑按钮的触发信息后，根据列表中触发的编辑按钮对应的名称及目录信息自动读取XML配置文件并对XML配置文件进行解析，将配置参数以表单的形式展示到WEB界面上，接收用户在web界面上对配置文件的编辑。节省调优过程时间，提高了效率。提高了效率。提高了效率。

【技术实现步骤摘要】
实现Hadoop平台参数动态调优的web系统、方法


[0001]本专利技术涉及开源Hadoop平台参数动态调优
，具体提供实现Hadoop平台参数动态调优的web系统、方法。

技术介绍

[0002]Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Distributed File System)，其中一个组件是HDFS(Hadoop Distributed File System)。HDFS有高容错性的特点，并且设计用来部署在低廉的(low
‑
cost)硬件上；而且它提供高吞吐量(high throughput)来访问应用程序的数据，适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求，可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是：HDFS和MapReduc本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.实现Hadoop平台参数动态调优的web系统，其特征在于，包括web界面和管理后台；web界面，用于通过列表实现对Hadoop平台的配置文件、服务组件以及部署Hadoop平台的服务器信息进行维护，并提供与管理后台通信的用于分别对配置文件、服务组件以及服务器信息进行编辑的添加按钮、修改按钮和删除按钮；管理后台，用于接收到编辑按钮的触发信息后，根据列表中触发的编辑按钮对应的名称及目录信息自动读取XML配置文件并对XML配置文件进行解析，将配置参数以表单的形式展示到WEB界面上，接收用户在web界面上对配置文件的编辑。2.根据权利要求1所述的实现Hadoop平台参数动态调优的web系统，其特征在于，web界面设置有服务器信息维护模块、配置文件维护模块和服务组件维护模块；服务器信息维护模块，用于实现对部署Hadoop平台的服务器信息进行维护，并提供与管理后台通信的服务器信息添加按钮、服务器信息删除按钮和服务器信息修改按钮；配置文件维护模块，用于维护Hadoop平台配置文件将配置以表单的形式展示并提供与管理后台通信的配置添加按钮、配置修改按钮和配置删除按钮；服务组件维护模块，用于维护Hadoop平台的服务组件并提供与管理后台通信的服务添加按钮、服务修改按钮、服务删除按钮、服务启动按钮和服务停止按钮。3.根据权利要求2所述的实现Hadoop平台参数动态调优的web系统，其特征在于，服务器信息维护模块，具体用于维护IP地址、用户名、密码信息，通过所述信息使用SSH、SCP指令登录或传送文件到指定的服务器。4.根据权利要求3所述的实现Hadoop平台参数动态调优的web系统，其特征在于，配置文件维护模块，具体用于将Hadoop常用于调优的配置文件维护到配置文件列表中，通过触发配置文件修...

【专利技术属性】
技术研发人员：张恒岩，
申请(专利权)人：苏州浪潮智能科技有限公司，
类型：发明
国别省市：