[发明专利]分布式消息系统

权利要求书

1.一种分布式消息系统，包括用于产生主题消息数据的生产集群、存储所述主题消息数据的服务集群、消费所述主题消息数据的消费集群、以及用于管理所述消费集群和所述服务集群的管理集群；其特征在于：所述服务集群包括用于存储所述主题消息数据的主题分区，所述主题分区包括分布在所述服务集群的不同服务端中的主副本和从副本，所述从副本为所述主副本的冗余备份；所述生产集群中的生产端访问所述主题分区的主副本以存储其产生的主题消息数据，所述消费集群中的消费端访问所述主题分区的主副本以消费所述主题分区的消息数据；所述生产集群中的生产端，轮询各主题分区的主副本，以将其产生的主题消息数据分布式地存储在各主题分区中；所述主副本接收存储来自所述生产端的主题消息数据，并且更新其从副本使得所述从副本与所述主副本同步；所述主题分区包括由所述从副本组成的保持同步副本集，所述保持同步副本集内的从副本相对于其他从副本拥有更新的消息数据；当所述保持同步副本集中的所述从副本数量小于预设的最小同步副本数量时，所述主题分区不接收来自所述生产集群的主题消息数据；

在无保障等级下，所述主副本在接收到所述生产端发送的主题消息数据后，发送消息提交成功信息至所述生产端；

在快速等级下，所述主副本在接收到所述生产端发送的主题消息数据后同步给所述从副本，并且在收到第一个从副本的确定同步信息后，发送消息提交成功信息至所述生产端；

在安全等级下，所述主副本在接收到所述生产端发送的主题消息数据后同步给所述从副本，并且在收到大于所述保持同步副本集的从副本数量预设值个从副本的确定同步信息后，发送消息提交成功信息至所述生产端；

当所述主副本下线时，由保持同步副本集合中的各从副本将其最大逻辑版本号上报给所述管理集群，所述管理集群根据保持同步副本集合中所有所述从副本的最大逻辑版本号，选出最大逻辑版本号对应的从副本作为主副本。

2.根据权利要求1所述的一种分布式消息系统，其特征在于：所述主题分区接收到所述生产端发送的主题消息数据后映射到所述服务端的内存中，所述主副本提供所述主题消息数据在所述内存中的偏移地址以响应消费端对所述主题消息数据的消费请求。

3.根据权利要求2所述的一种分布式消息系统，其特征在于：所述主题分区包括数据段落跳跃表，所述数据段落跳跃表包括多个数据层；下一数据层的节点数量大于上一数据层的节点数量，并且下一数据层包括上一数据层的所有节点，位于底层的数据层包括所述数据段落跳跃表的所有节点；所述节点包括段落数据，所述段落数据包括所述主题消息数据。

4.根据权利要求3所述的一种分布式消息系统，其特征在于：所述节点包括其在下一数据层中的指针数据、所述节点所在数据层的下一节点的指针数据。

5.根据权利要求4所述的一种分布式消息系统，其特征在于：所述段落数据包括索引文件，所述索引文件记载所述主题消息数据的逻辑版本号与所述主题消息数据在内存中的偏移地址的一一映射关系；所述逻辑版本号反映所述主题消息数据到达所述服务集群的先后顺序。