[发明专利]一种消息队列的计算资源负载均衡方法及装置

说明书

本申请涉及一种消息队列的计算资源负载均衡方法及装置。其中，方法包括：获取目标消息队列中每个候选分区的计算资源使用率；根据每个候选分区的计算资源使用率，在所有候选分区中确定出高负载分区以及低负载分区；根据高负载分区的计算资源使用率以及低负载分区的计算资源使用率，得到用于对待写入目标消息队列的所有待写入消息进行分流的分流方案；按照分流方案，依次将各个待写入消息写入各个候选分区中。通过本申请可以根据各个候选分区的计算资源使用率得到对应的分流方案，使待写入消息写入低负载分区的概率高于将待写入消息写入高负载分区的概率，可以有效避免因为消息队列在使用过程中不同候选区间的计算资源使用率不均衡导致故障的问题。

技术领域

本申请涉及计算机技术领域，尤其涉及一种消息队列的计算资源负载均衡方法及装置。

背景技术

消息队列是一种消息传输的中间件，常用于各个系统之间的解耦、数据转发、异步通信、流量削峰的场景；其中，支持发布/订阅(publish/subscribe，简称pub/sub)的topic消息传递模型为一种广泛使用的能够广播的消息队列模型，topic消息传递模型中包括生产者(producer)、主题(topic，即消息队列)、分区(partition)、消费者(consumer)。

在相关技术中，在一些情况下，在数据的生产者向主题发送数据之后，存在消息队列中的各个分区负载不均衡的问题，并容易导致消息队列在使用过程中出现故障。

针对相关技术的消息队列中各个分区负载不均衡的技术问题，目前尚未提供有效的解决方案。

发明内容

为了解决上述消息队列中各个分区负载不均衡的技术问题，本申请提供了一种消息队列的计算资源负载均衡方法及装置。

第一方面，本申请实施例提供了一种消息队列的计算资源负载均衡方法，包括：

获取目标消息队列中每个候选分区的计算资源使用率；

根据每个所述候选分区的计算资源使用率，在所有所述候选分区中确定出高负载分区以及低负载分区，其中，所述高负载分区的计算资源使用率大于或等于目标使用率阀值，所述低负载分区的计算资源使用率小于所述目标使用率阀值；

根据所述高负载分区的计算资源使用率以及所述低负载分区的计算资源使用率，得到用于对待写入所述目标消息队列的所有待写入消息进行分流的分流方案；

按照所述分流方案，依次将各个所述待写入消息写入各个所述候选分区中，其中，一个所述待写入消息只写入一个所述候选分区中，按照所述分流方案将所述待写入消息写入所述低负载分区的概率高于将所述待写入消息写入所述高负载分区的概率。

可选的，如前述的方法，所述根据每个所述候选分区的计算资源使用率，在所有所述候选分区中确定出高负载分区以及低负载分区包括：

在所述候选分区的计算资源使用率指示所述候选分区的当前CPU使用率大于或等于CPU目标使用率阀值，或所述候选分区的当前磁盘使用率大于或等于磁盘目标使用率阀值，或所述候选分区的当前内存使用率大于或等于内存目标使用率阀值的情况下，将所述候选分区确定为所述高负载分区；

在所述候选分区的计算资源使用率指示所述候选分区的当前CPU使用率小于CPU目标使用率阀值，所述候选分区的当前磁盘使用率小于磁盘目标使用率阀值，以及所述候选分区的当前内存使用率小于内存目标使用率阀值的情况下，将所述候选分区确定为所述低负载分区。

可选的，如前述的方法，所述根据所述高负载分区的计算资源使用率以及所述低负载分区的计算资源使用率，得到用于对待写入所述目标消息队列的待写入消息进行分流的分流方案包括：

确定所述高负载分区的数量以及所述低负载分区的数量；