[发明专利]一种基于局域网大数据处理系统自动部署的方法

摘要

本发明涉及一种基于局域网大数据处理系统自动部署的方法，以基于Linux的Shell脚本为基础，利用PXE、Java及Hadoop2.X等技术实现了在高校局域网内快速实现大数据处理系统的自动安装与部署。本发明首次将高校公共教学机房内每台微机安装有VMware Workstation及电子教室的传统教学环境利用起来，节点数及IP地址范围均可从初始配置文件中读取，具有高可靠性和高选择性。本发明使用简单、维护门槛低，可方便、快速满足教学、科研等部门建立大数据处理平台的需求。

主权项

1.一种基于局域网大数据处理系统自动部署的方法，提供一大数据处理系统及一电子教室，其特征在于：所述电子教室包括一教师机和若干学生机，所述教师机与所述学生机通讯相连；所述学生机和所述教师机上分别搭载有虚拟机；按照如下步骤实现：步骤S1：提供初始配置文件init.cfg；根据所述初始配置文件init.cfg将所述教师机作为所述大数据处理系统的管理节点，将所述学生机作为所述大数据管理系统的数据节点；步骤S2：在所述教师机上安装CentOS6.X操作系统，在所述CentOS6.X操作系统的环境下提供有Shell编程工具；在所述教师机上使用Shell编程工具生成所述大数据处理系统虚拟管理节点的系统自动安装脚本；步骤S3：使用所述Shell编程工具生成各个虚拟数据节点通过PXE方式自动安装操作系统的脚本；步骤S4：使用所述Shell编程工具生成所述大数据处理系统虚拟管理节点与所述虚拟数据节点之间实现SSH无密码自行登录的脚本；步骤S5：使用所述Shell编程工具生成能够用以依据初始配置文件中设定虚拟数据节点个数来建立大数据处理系统各个虚拟节点软件自动部署的监控、分发即守护进程脚本；步骤S6：使用所述的Shell脚本编程工具将所述步骤S2至所述步骤S5生成的脚本文件集成，得到集成脚本，运行该集成脚本生成一个ISO镜像文件；步骤S7：所述学生机获取所述教师机上的虚拟机文件集形成的自动解压缩包执行文件，并分发给所述学生机；待分发完成后，所述教师机使用远程命令启动所有所述学生机上已分发的执行文件，解压缩之后自行调用虚拟机文件启动虚拟机；所述学生机上的虚拟机启动时通过PXE方法自动获取教师机上的启动文件，并使用教师机上ISO文件中的脚本命令完成大数据处理系统Hadoop数据节点的部署工作。