[发明专利]一种数据平衡方法、装置及分布式存储系统中的管理设备

说明书

本申请提供了一种数据平衡方法、装置及分布式存储系统中的管理设备，方法包括：当接收到来自客户端的数据写请求时，从多个存储节点中确定目标存储节点，以使客户端将数据写请求对应的目标数据写入目标存储节点；基于各存储节点中的存储数据量，从多个存储节点中不同于目标存储节点的剩余存储节点中确定至少一个备份存储节点；将至少一个备份存储节点的标识信息发送至目标存储节点，以使目标存储节点将目标数据分别写入至少一个备份存储节点。本申请提供的数据平衡方法、装置及分布式存储系统中的管理设备，在数据写入的时候就考虑了数据平衡的问题，这使得数据不平衡的情况大为减少。

技术领域

本发明涉及数据存储技术领域，尤其涉及一种数据平衡方法、装置及分布式存储系统中的管理设备。

背景技术

目前，使用分布式存储系统进行数据存储的平台，使用一段时间后，由于热点数据、热点应用等原因，导致数据在各个服务器之间出现数据不平衡的情况，数据不平衡会导致IO出现瓶颈。

现有技术中，为了解决数据不平衡问题，运维人员需要定时去查询服务集群中各个服务器的数据情况，当服务器出现数据不平衡时，运维人员会手动执行平衡数据的操作。

然而，运维人员手动进行数据平衡的方式存在一定的问题：开始平衡操作时，运维人员无法获知服务集群的运行状况，如果服务集群有任务在进行，平衡操作经常会失败或者占用任务的IO资源；当服务器中的数据量比较大，且各个服务器之间的数据量差距比较大时，平衡的时间比较长。

发明内容

有鉴于此，本发明提供了一种数据平衡方法、装置及分布式存储系统中的管理设备，用以解决现有技术中的平衡方法会存在平衡操作失败、平衡时间比较长的问题，其技术方案如下：

一种数据平衡方法，应用于分布式存储系统中的管理节点，所述方法包括：

当接收到来自客户端的数据写请求时，从多个存储节点中确定目标存储节点，以使所述客户端将所述数据写请求对应的目标数据写入所述目标存储节点，其中，所述管理节点可与所述多个存储节点通信；

基于各存储节点中的存储数据量，从所述多个存储节点中不同于所述目标存储节点的剩余存储节点中确定至少一个备份存储节点，其中，所述存储数据量为已存储数据的数据量；

将所述至少一个备份存储节点的标识信息发送至所述目标存储节点，以使所述目标存储节点将所述目标数据分别写入所述至少一个备份存储节点。

其中，所述从多个存储节点中确定目标存储节点，包括：

从所述多个存储节点中确定存储数据量最小的存储节点；

将所述存储数据量最小的存储节点确定为所述目标存储节点。

其中，所述从多个存储节点中确定目标存储节点，包括：

判断是否存在与所述客户端处于同一服务器上的存储节点；

若存在与所述客户端处于同一服务器上的存储节点，则将与所述客户端处于同一服务器上的存储节点确定为所述目标存储节点；

若不存在与所述客户端处于同一服务器上的存储节点，则从所述多个存储节点中确定存储数据量最小的存储节点，将所述存储数据量最小的存储节点确定为所述目标存储节点。

其中，所述基于各存储节点中的存储数据量，从所述多个存储节点中不同于所述目标存储节点的剩余存储节点中确定至少一个备份存储节点，包括：

若所述剩余存储节点中存在与所述目标存储节点属于不同组的存储节点，则基于存储数据量从与所述目标存储节点属于不同组的存储节点中确定所述至少一个备份存储节点，其中，所述至少一个备份存储节点的存储数据量均小于与所述目标存储节点属于不同组的存储节点中不同于所述至少一个备份存储节点的存储节点的存储数据量；