[发明专利]基于Elasticsearch集群的shard分配方法

权利要求书

1.一种基于Elasticsearch集群的shard分配方法，其特征在于，应用于Elasticsearch集群的存储计算分离模式，所述方法包括：

判断是否接收到客户端发送的创建索引请求；

若接收到客户端发送的创建索引请求，则依据所述创建索引请求构建shard分配规则；

依据shard分配规则获取从节点中的可分配从节点；

依据每一个可分配从节点的CPU利用状态和内存利用状态，计算每一个可分配从节点的权重，并选取权重最小的可分配从节点作为shard分配节点；

在所述shard分配节点处创建一个shard；

返回所述依据每一个可分配从节点的CPU利用状态和内存利用状态的步骤，创建下一个shard，直至创建的shard总数达到预设shard数量，完成索引的创建；

其中，所述依据每一个可分配从节点的CPU利用状态和内存利用状态，计算每一个可分配从节点的权重，并选取权重最小的可分配从节点作为shard分配节点，包括：

选取一个可分配从节点；

获取预设索引权重平衡因子、预设节点权重平衡因子、所述索引在所述可分配从节点上的shard总数、以及所述索引在所有可分配从节点上的shard平均数；

获取所述可分配从节点上当前已有的shard总数、以及所有可分配从节点上当前已有的shard平均数；

依据公式1分别计算所述可分配从节点的索引权重和节点权重；

其中，WEIGHT_index(node,index)为所述可分配从节点的索引权重，WEIGHT_node(node,index)为所述可分配从节点的节点权重，indexBalance为预设索引权重平衡因子，shardBalance为预设节点权重平衡因子，Node.numShards(index)为所述索引在所述可分配从节点上的shard总数，avgShardsPerNode(index)为所述索引在所有可分配从节点上的shard平均数；Node.numShards为所述可分配从节点上当前已有的shard总数，avgShardsPerNode为所有可分配从节点上当前已有的shard平均数；

获取所述可分配从节点的当前CPU利用率和当前内存利用率，以及第一配置参数、第二配置参数和第三配置参数；

依据公式2计算所述可分配从节点的CPU权重和内存权重；

其中，WEIGHT_cpu为所述可分配从节点的CPU权重，WEIGHT_mem为所述可分配从节点的内存权重，RATIO_cpu为所述可分配从节点的当前CPU利用率，RATIO_mem为所述可分配从节点的当前内存利用率，θ₀为第一配置参数，θ₁为第二配置参数，θ₂为第三配置参数；

依据公式3计算所述可分配从节点的平衡权重；

WEIGHT_node,index＝[WEIGHT_index(node,index)+WEIGHT_inode(node,index)]×θ₂ 公式3；

其中，WEIGHT_node,index为所述可分配从节点的平衡权重，WEIGHT_index(node,index)为所述可分配从节点的索引权重，WEIGHT_inode(node,index)为所述可分配从节点的节点权重，θ₂为第三配置参数；

依据公式4计算所述可分配从节点的权重；

其中，WEIGHT_node为所述可分配从节点的权重，WEIGHT_cpu为所述可分配从节点的CPU权重，WEIGHT_mem为所述可分配从节点的内存权重，WEIGHT_node,index为所述可分配从节点的平衡权重；

返回选取一个可分配从节点的步骤，直至所有可分配从节点的权重均计算完毕；

选取权重最小的可分配从节点作为shard分配节点。