[发明专利]一种大数据集群管理方法和装置

权利要求书

1.一种大数据集群管理方法，其特征在于，应用于大数据集群中安装有分布式应用程序协调服务zookeeper的任一集群节点上，所述方法包括：

第一集群节点选举临时主节点；

当所述第一集群节点被选为临时主节点时，确定在zookeeper中是否存在集群信息管理cluster节点单元；

如果是，则使用zookeeper中的cluster节点单元存储并管理所述大数据集群的集群服务数据；

否则，在zookeeper中创建cluster节点单元，使用该cluster节点单元存储并管理所述大数据集群的集群服务数据；

其中，所述方法进一步包括：

所述第一集群节点以预设周期为周期在zookeeper中创建临时节点单元；

若任一所述预设周期内，确定zookeeper中不存在所述大数据集群中的任一集群节点的临时节点单元，则确定该集群节点不可用。

2.根据权利要求1所述的方法，其特征在于，所述集群节点进一步安装有反向代理服务Nginx；

所述方法进一步包括：

所述第一集群节点被选为临时主节点时，通过所述Nginx监听配置的虚拟IP地址对应的请求；

当监听到所述虚拟IP地址对应的请求时，通过所述Nginx将所述请求转发到所述第一集群节点上，并响应web端的请求。

3.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：

当所述第一集群节点确定本节点可用，且被选举为临时主节点的集群节点不可用时，执行选举临时主节点的步骤。

4.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：

所述第一集群节点若确定本节点由不可用变为可用，则被分配比当前可用的集群节点的编号大的编号。

5.根据权利要求1所述的方法，其特征在于，所述大数据集群中的各集群节点分配有唯一的编号，所述第一集群节点选举临时主节点，包括：

当所述第一集群节点的编号在当前可用的集群节点的编号中为最小时，第一集群节点选择自身作为临时主节点。

6.根据权利要求1-5任意一项所述的方法，其特征在于，所述方法进一步包括：

所述第一集群节点若被设置为指挥节点，则通知其它集群节点从Server端的分布式版本控制系统Git仓库中下载所需大数据组，并从Server端的Git仓库中下载所需大数据组件，在本地解压安装；

所述第一集群节点若未被设置为指挥节点，则在接收到指挥节点发送的通知时，从Server端的Git仓库中下载所需大数据组件，并在本地解压安装。

7.一种大数据集群管理装置，其特征在于，应用于大数据集群中安装有分布式应用程序协调服务zookeeper的任一集群节点上，所述装置包括：选举单元、确定单元和处理单元；

所述选举单元，用于选举临时主节点；

所述确定单元，用于当本单元所在集群节点被选为临时主节点时，确定在zookeeper中是否存在集群信息管理cluster节点单元；

所述处理单元，用于当所述确定单元确定在zookeeper中存在cluster节点单元时，使用zookeeper中的cluster节点单元存储并管理所述大数据集群的集群服务数据；否则，在zookeeper中创建cluster节点单元，使用该cluster节点存储并管理所述大数据集群的集群服务数据；

其中，

所述处理单元，进一步用于以预设周期为周期在zookeeper中创建临时节点单元；若任一所述预设周期内，确定zookeeper中不存在所述大数据集群中的任一集群节点的临时节点单元，则确定该集群节点不可用。

8.根据权利要求7所述的装置，其特征在于，所述装置进一步包括：反向代理服务Nginx单元；

所述Nginx单元，用于本单元所在第一集群节点被选为临时主节点时，监听配置的虚拟IP地址对应的请求；当监听到所述虚拟IP地址对应的请求时，通过所述Nginx将所述请求转发到所述第一集群节点上，并响应web端的请求。