[发明专利]一种分布式存储方法、装置及系统、电子设备及存储介质

说明书

本申请公开了一种分布式存储方法、装置及系统、电子设备及存储介质。所述分布式存储方法可包括：将第一数据存储在分布式存储系统中的至少一个存储节点；根据所述第一数据的存储位置，确定所述第一数据的数据索引，其中，所述数据索引为所述第一数据的元数据的组成部分；根据哈希规则，从所述分布式存储系统中选择存储所述元数据的存储节点；将所述元数据存储到选择的所述存储节点中。如此，实现对目标数据存储位置的灵活选择，降低单点故障处理成本。

技术领域

本发明涉及云计算领域，尤其涉及一种分布式存储方法、装置及系统、电子设备及存储介质。

背景技术

在分布式存储领域，传统的中心式架构的分布式存储系统，统一分配并记录存储位置在数据库中，可灵活调整业务负载，具备非常好的扩展性。而采用无中心式技术方案的分布式存储系统，通过计算代替查询来确定数据位置，大大减少了读写路径的长度，提高了系统性能。但是无中心式架构不依赖元数据确定数据存储位置的方式，使数据位置的计算基于一定的固定规则，如通过crush算法等来确定，发生单点故障时，数据的写入效率会大大降低，而且在存储系统扩容后，数据平衡与业务写入会产生一定的冲突。

发明内容

有鉴于此，本发明提供一种分布式存储方法、装置及系统、电子设备及存储介质。

本发明的技术方案是这样实现的：

第一方面，本发明提供一种分布式存储方法，包括：

将第一数据存储在分布式存储系统中的至少一个存储节点；

根据第一数据的存储位置，确定第一数据的数据索引，其中，数据索引为第一数据的元数据的组成部分；

根据哈希规则，从分布式存储系统中选择存储元数据的存储节点；

将元数据存储到选择的存储节点中。

进一步地，元数据还包括：第一数据的数据标识；

根据哈希规则，从分布式存储系统中选择存储元数据的存储节点，包括：

根据哈希规则处理数据标识，得到哈希值；

从分布式存储系统中选择与哈希值对应的存储节点，作为存储元数据的存储节点。

进一步地，根据哈希规则处理数据标识，得到哈希值，包括：

基于哈希规则处理节点映射信息NodeMap与数据标识，得到哈希值，其中，NodeMap包括：分布式存储系统中全部存储节点的组织架构信息与权重信息。

进一步地，接收读取第二数据的数据读取请求；

基于NodeMap和第二数据的数据标识，确定存储第二数据的元数据的存储节点；

若确定的存储节点中没有第二数据的元数据，则基于历史NodeMap和第二数据的数据标识，重新确定存储元数据的存储节点；

将重新确定的存储节点中存储的第二数据的元数据，迁移至基于NodeMap和第二数据的数据标识确定的存储节点。

进一步地，若确定的存储节点中没有第二数据的元数据，则基于历史NodeMap和第二数据的数据标识，重新确定存储元数据的存储节点，包括：

若确定的存储节点中没有第二数据的元数据，确定当前分布式存储系统是否处于主动回溯状态，其中，在主动回溯状态下，分布式存储系统正在依据NodeMap迁移元数据；

若当前分布式存储系统处于主动回溯状态，则基于历史NodeMap和第二数据的数据标识，重新确定存储元数据的存储节点。

进一步地，若当前分布式存储系统未处于主动回溯状态，返回错误提示信息。