[发明专利]一种集群数据处理方法、主节点、从节点和集群

说明书

本发明提供了一种集群数据处理方法、主节点、从节点和集群，通过提供一种集群数据处理方法使得集群所有节点的数据可以以循环的方式不断获得更新，每个从节点均可以获取主节点和其它从节点的快照，并且能够独立对外提供查询服务，进而将集群的计算和查询压力分散到集群中所有节点；由于每个从节点均保留有主节点和其它从节点的快照，因此，即使主节点或其它节点出现宕机，每个节点仍然能够对外提供完整、正确的数据，从而显著增强整个集群的鲁棒性。

技术领域

本发明涉及分布式计算领域，尤其涉及一种集群数据处理方法、主节点、从节点和集群。

背景技术

目前常用的集群中的数据的同步方式如图1所示，通常是集群中的其它节点将本地的数据发送至主节点，由主节点进行存储和合并计算，并统一对外提供查询功能，这种现有方案至少存储在下述三个问题：

(1)从节点过多或数据量过大时，主节点处理压力会比较大；

(2)只有主节点才有整个集群的完整数据，才能对外提供集群运行状态的查询，因此主节点查询压力也比较大；

(3)主节点一旦出现宕机，新的主节点会丢失原有主节点的数据，出现数据不完整的情况。

发明内容

为了解决上述技术问题，本发明提出了一种集群数据处理方法、主节点、从节点和集群。本发明具体是以如下技术方案实现的：

第一方面，一种集群数据处理方法，所述数据处理方法包括：

主节点生成同步信息包，并将所述同步信息包发布至节点环中以使得所述同步信息包沿所述节点环到达下一个节点；所述节点环由一个主节点和不少于一个从节点构成，所述节点环包括所述集群中的全部节点；

所述同步信息包在所述节点环中进行第一轮传递：每到达一个节点后，当前节点按照第一预设规则对自身本地的数据进行变更，并按照第二预设规则对同步信息包进行更新，将更新后的所述同步信息包重新发布至节点环上继续传递以使得所述同步信息包沿所述节点环到达下一个节点；

以所述主节点获取所述同步信息包为起点，执行所述同步信息包在所述节点环中的第二轮传递：获取同步信息包的当前节点根据第三预设规则对自身本地的数据进行变更以及向所述当前节点的通信节点发布更新数据；根据第四预设规则对所述同步信息包中的内容进行删减，并将删减后的所述同步信息包发布至节点环上继续传递以使得所述同步信息包沿所述节点环到达下一个节点；

当所述主节点再次获取所述同步信息包后，将所述同步信息包丢弃，返回执行所述主节点生成同步信息包的步骤。

第二方面，一种主节点，所述主节点包括：

同步信息包生成模块，用于生成同步信息包；

同步信息包传递控制模块，用于将同步信息包发布节点环中以使得所述同步信息包沿所述节点环到达下一个节点；所述节点环由一个主节点和不少于一个从节点构成，所述节点环包括集群中的全部节点；

数据处理模块，用于根据第三预设规则对自身本地的数据进行变更以及向所述主节点的通信节点发布更新数据；

同步信息包变更模块，用于根据第四预设规则对所述同步信息包中的内容进行删减；

同步信息包丢弃模块，用于在同步信息包经过第二轮传递后丢弃所述同步信息包。

第三方面，一种从节点，所述节点包括：

同步信息包获取模块，用于获取同步信息包；

同步信息包传递控制模块，用于将同步信息包发布至节点环中以使得所述同步信息包沿所述节点环到达下一个节点；所述节点环由一个主节点和不少于一个从节点构成，所述节点环包括集群中的全部节点；