[发明专利]一种搜索引擎数据库管理方法、装置及搜索引擎数据库

说明书

本申请提供一种搜索引擎数据库管理方法、装置及搜索引擎数据库，该方法包括：获取搜索引擎数据库对应的各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量；根据各计算机设备节点的当前数据存储量、当前存储使用率以及新分片的数量，确定目标计算机设备节点；将所述搜索引擎数据库的新分片，分配至所述目标计算机设备节点。通过综合考虑各计算机设备节点当前数据存储量、当前存储使用率以及新分片的数量，选择新分片对应的目标计算机设备节点，确保新分片分配至对应的目标计算机设备节点后，各个计算机设备节点的数据存储能够趋于平衡，提高了资源利用率，也为提高ES数据库的搜索效率奠定了基础。

技术领域

本申请涉及数据库技术领域，尤其涉及一种搜索引擎数据库管理方法、装置及搜索引擎数据库。

背景技术

Elasticsearch（ES）数据库是现今使用广泛且功能强大的分布式全文搜索引擎，其索引数据可以分散存储到多个计算机设备节点上，这里分散存储的数据块称作分片（Shard）。分片在多台计算机设备上的分配机制决定了ES数据库存储的平衡性，因此，在创建新的分片时，如何将其分配到对应的计算机设备节点成为了重点研究内容。

在现有技术中，通常将计算机设备节点列表按现有分片数量升序排序，找出当前拥有分片数量最少的计算机设备节点，然后将新创建的分片分配至当前拥有分片数量最少的计算机设备节点。

但是，在实际的生产环境当中，随着ES索引的开启和关闭、计算机设备节点的上下线及部分数据删除等情况的交替发生，若基于现有技术分配新创建的分片，将导致各个计算机设备节点出现数据存储严重不平衡的情况，不仅降低了资源利用率，也不利于保证ES数据库的搜索效率。

发明内容

本申请提供一种搜索引擎数据库管理方法、装置及搜索引擎数据库，以解决现有技术导致各个计算机设备节点出现数据存储严重不平衡的情况，不仅降低了资源利用率，也利于保证ES数据库的搜索效率等缺陷。

本申请第一个方面提供一种搜索引擎数据库管理方法，包括：

获取搜索引擎数据库对应的各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量；

根据各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量，确定目标计算机设备节点；

将所述搜索引擎数据库的新分片，分配至所述目标计算机设备节点。

可选的，所述根据各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量，确定目标计算机设备节点，包括：

根据各所述计算机设备节点的当前存储使用率，确定各所述计算机设备节点之间的当前平衡评价指标；

根据各所述计算机设备节点之间的当前平衡评价指标，确定节点选择约束条件；

按照所述节点选择约束条件，根据各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量，确定目标计算机设备节点。

可选的，所述根据各所述计算机设备节点的当前存储使用率，确定各所述计算机设备节点之间的当前平衡评价指标，包括：

根据各所述计算机设备节点的当前存储使用率，确定各所述计算机设备节点之间的当前存储使用率标准差；

将所述当前存储使用率标准差，作为各所述计算机设备节点之间的当前平衡评价指标。

可选的，所述按照所述节点选择约束条件，根据各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量，确定目标计算机设备节点，包括：

根据各计算机设备节点的当前数据存储量、各计算机设备节点的当前存储使用率以及新分片的数量，确定待选计算机设备节点；