[发明专利]数据消费的负载均衡方法及装置

摘要

本申请提供一种数据消费的负载均衡方法，包括：计算与集群订阅的各待分配消息主题对应的散列值，并将该散列值在待分配节点设备列表中的映射位置确定为对应于各待分配消息主题的起始分配位置；基于集群订阅的消息队列的总数，对应于各待分配节点设备的平均数，从与所述分配起始位置对应的节点设备开始，为所述待分配节点设备列表中的各节点设备平均分配消息队列，并对分配至各节点设备的消息队列的数据量进行组合搭配；当集群订阅的各消息队列均分配完成，查找分配至本设备的目标消息队列，并基于拉模式从所述目标消息队列中获取消息数据进行消息处理。本申请可以确保分配至各节点设备的消息队列，在数量和对应的数据量上均能够达到均衡。

主权项

一种消息处理的负载均衡方法，其特征在于，应用于与消息系统对接的分布式集群中的任一节点设备，所述分布式集群订阅了所述消息系统中的至少一个消息主题的消息数据，所述消息主题包括若干消息队列；所述节点设备基于拉模式从所述消息系统获取与所述消息主题对应的消息数据进行消息处理，所述方法包括：计算与集群订阅的各待分配消息主题对应的散列值，并将该散列值在待分配节点设备列表中的映射位置确定为对应于各待分配消息主题的起始分配位置；基于集群订阅的消息队列的总数，对应于所述待分配节点设备列表中各待分配节点设备的平均数，从与所述分配起始位置对应的节点设备开始，为所述待分配节点设备列表中的各节点设备平均分配消息队列，并基于预设的负载均衡策略对分配至各节点设备的消息队列的数据量进行组合搭配；当集群订阅的各消息队列均分配完成，查找分配至本设备的目标消息队列，并基于拉模式从所述目标消息队列中获取消息数据进行消息处理。