[发明专利]大数据环境下实现分布式中间件消息恢复策略管理的系统

权利要求书

1.一种大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的系统包括：

环境初始化模块，用于满足分布式集群搭建的基本条件；

恢复策略设计模块，与所述的环境初始化模块相连接，用于使用副本集合中的ISR设计恢复策略，通过副本恢复数据；

分布式集群应用模块，与所述的恢复策略设计模块相连接，用于在宕机的情况下恢复数据。

2.根据权利要求1所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的环境初始化模块的基本条件包含kafka的生产、消费消息的应用场景、架构、分发和消费原理、ISR和硬件要求。

3.根据权利要求2所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的消费消息的应用场景为行为跟踪和日志收集。

4.根据权利要求2所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的架构包含若干Producer、若干Broker、若干Consumer Group和zookeeper集群，所述的若干Broker相互连接且协同工作，所述的Producer、Broker和Consumer Group通过zookeeper管理协调请求和转发，所述的Producer通过push模式发布消息至broker，所述的Consumer Group通过监听使用pull模式从broker订阅并消费消息。

5.根据权利要求2所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的系统中包含topic消息集合，每个topic消息集合包含多个分区，分区策略分别为默认策略、轮询策略和粘性策略。

6.根据权利要求1所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的副本的策略包含分区的副本机制策略、副本的leader选举策略、副本协同机制策略和副本数据同步原理策略。

7.根据权利要求1所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的分区的副本机制策略中包含主副本和多个从副本，从副本从主副本同步消息日志，所述的主副本和从副本均匀分配到集群中的不同broker上，在主副本的broker出现故障的情况下，重新选举新的主副本继续对外提供服务。

8.根据权利要求1所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的副本的leader选举策略在broker失效的情况下，各个broker重新主副本选举得到新的KafkaController。

9.根据权利要求1所述的大数据环境下实现分布式中间件消息恢复策略管理的系统，其特征在于，所述的副本协同机制策略为由主副本的节点接收和处理消息的读写操作，从副本进行同步数据，在主副本所在的broker失效的情况下，在从副本中选取新的主副本。