基于大数据实训平台的大数据组件自动控制方法及系统技术方案

本发明专利技术公开了一种基于大数据实训平台的大数据组件自动控制方法，包括：对主节点虚拟机及从节点虚拟机进行检测处理以生成配置信息；根据所述配置信息初始化所述主节点虚拟机及从节点虚拟机；将用户选择的目标组件区的配置文件移动到主节点虚拟机的文件目录下；将所述主节点虚拟机的配置文件分发至所述从节点虚拟机；根据所述配置文件启动所述主节点虚拟机及从节点虚拟机的组件服务，以完成组件部署。本发明专利技术还公开了一种基于大数据实训平台的大数据组件自动控制系统。采用本发明专利技术，可实现大数据组件自动部署，快速开展教学。

Automatic control method and system of big data component based on big data training platform

【技术实现步骤摘要】
基于大数据实训平台的大数据组件自动控制方法及系统
本专利技术涉及大数据
，尤其涉及一种基于大数据实训平台的大数据组件自动控制方法及一种基于大数据实训平台的大数据组件自动控制系统。
技术介绍
大数据是当前国家的战略重心，也是各省市以及高校竞争的焦点，随着大数据行业迅速发展，未来社会对大数据的人才需求将剧烈增长，为服务国家大数据战略，高校要提前做好大数据人才培养的准备，满足社会需求。面对各地大数据人才的急剧缺失以及各地对大数据人才培养的鼓励，教育部增设了数据科学与大数据技术、大数据技术与应用两个专业，高校大数据专业建设正处于起步阶段，为扩大高校在区域内、省内乃至全国的影响力，更好的服务地方，实现学校跨越式发展，在大数据方面实现弯道超车，高校开展大数据方面的应用与研究，并将研究成果应用于教学，提高高校教学质量，提高老师的教学和科研水平，提高学生未来工作适应能力、就业水平以及就业质量，高校纷纷开设大数据方向人才的培养。然而，高校在大数据专业建设过程中仍面临一些巨大挑战：在大数据专业教学开展过程中，学生在做大数据实验的时，经常会遇到需要大数本文档来自技高网...

【技术保护点】
1.一种基于大数据实训平台的大数据组件自动控制方法，其特征在于，包括：/n对主节点虚拟机及从节点虚拟机进行检测处理以生成配置信息；/n根据所述配置信息初始化所述主节点虚拟机及从节点虚拟机；/n将用户选择的目标组件区的配置文件移动到主节点虚拟机的文件目录下；/n将所述主节点虚拟机的配置文件分发至所述从节点虚拟机；/n根据所述配置文件启动所述主节点虚拟机及从节点虚拟机的组件服务，以完成组件部署。/n

【技术特征摘要】
1.一种基于大数据实训平台的大数据组件自动控制方法，其特征在于，包括：
对主节点虚拟机及从节点虚拟机进行检测处理以生成配置信息；
根据所述配置信息初始化所述主节点虚拟机及从节点虚拟机；
将用户选择的目标组件区的配置文件移动到主节点虚拟机的文件目录下；
将所述主节点虚拟机的配置文件分发至所述从节点虚拟机；
根据所述配置文件启动所述主节点虚拟机及从节点虚拟机的组件服务，以完成组件部署。


2.如权利要求1所述的基于大数据实训平台的大数据组件自动控制方法，其特征在于，还包括，实验操作过程中，根据实际情况进行备份和/或还原处理，其中：
备份时，将实验节点中可写磁盘文件的状态设为只读状态，并创建用于保存变化内容的文件以形成还原区；
还原时，获取用户选择的还原区，并检测是否存在所述还原区，若存在，则读取所述还原区的数据以进行还原处理。


3.如权利要求1所述的基于大数据实训平台的大数据组件自动控制方法，其特征在于，进行检测处理和/或配置文件分发前，所述主节点虚拟机通过SSH方式登录所述从节点虚拟机。


4.如权利要求1或2所述的基于大数据实训平台的大数据组件自动控制方法，其特征在于，进行检测处理和/或实验操作前，对用户进行权限验证，若用户拥有访问权限，则可进行检测处理或实验操作。


5.如权利要求1所述的基于大数据实训平台的大数据组件自动控制方法，其特征在于，所述目标组件区包括hadoop区、spark区、Zookeeper区、Hive区、Sq...

【专利技术属性】
技术研发人员：罗文权，罗龙，李强，
申请(专利权)人：三盟科技股份有限公司，
类型：发明
国别省市：广东;44