[发明专利]一种数据存储方法、系统及相关装置

说明书

本申请提供一种数据存储方法，包括：接收到待存储数据的指纹值时，判断本地存储中是否存在所述指纹值；若是，将所述待存储数据存入独立存储区；判断所述待存储数据与所述本地存储中所述指纹值对应的已存储数据是否相同；若是，从所述独立存储区删除所述待存储数据；若否，将所述待存储数据从所述独立存储区转存至所述本地存储。本申请利用独立存储区解决由于哈希冲突可能的数据误删问题，保证了数据存储一致性。本申请还提供一种数据存储系统、计算机可读存储介质和服务器，具有上述有益效果。

技术领域

本申请涉及数据存储领域，特别涉及一种数据存储方法、系统及相关装置。

背景技术

在存储领域，海量数据查询和存储需要占用超大的资源，严重影响了数据存储的性能。在这些数据中，存在大量重复数据，为了降低存储数据占用的资源，提高数据存储性能，这种重复数据完全可以只保存一份在存储介质中，在不影响数据一致性的前提下，减少盘上数据存放量。判断数据是否重复的方法是通过哈希算法计算数据指纹值，通过比对指纹值作为数据是否相同的依据。但是哈希算法存在哈希冲突，即不同数据通过哈希运算得到相同的哈希值。

因此，如何解决由于哈希冲突对数据存储造成的影响是本领域技术人员亟需解决的技术问题。

发明内容

本申请的目的是提供一种数据存储方法、系统、计算机可读存储介质和服务器，能够解决数据存储时的哈希冲突。

为解决上述技术问题，本申请提供一种数据存储方法，具体技术方案如下：

接收到待存储数据的指纹值时，判断本地存储中是否存在所述指纹值；

若是，将所述待存储数据存入独立存储区；

判断所述待存储数据与所述本地存储中所述指纹值对应的已存储数据是否相同；

若是，从所述独立存储区删除所述待存储数据；

若否，将所述待存储数据从所述独立存储区转存至所述本地存储。

其中，判断本地存储中是否存在所述指纹值之前，还包括：

接收所述待存储数据，利用哈希算法计算所述待存储数据的指纹值。

其中，从所述独立存储区删除所述待存储数据之后，还包括：

将所述待存储数据的LP元数据和PL元数据更新至所述本地存储。

其中，若所述本地存储中不存在所述指纹值，还包括：

将所述待存储数据写入所述本地存储，并保存所述待存储数据的HP元数据、LP元数据和PL元数据。

其中，将所述待存储数据存入独立存储区之前，还包括：

在缓存或所述本地存储中划分独立存储区。

其中，判断所述待存储数据与所述本地存储中所述指纹值对应的已存储数据是否相同之前，还包括：

删除所述独立存储区中热度值低于预设阈值的待存储数据。

其中，判断所述待存储数据与所述本地存储中所述指纹值对应的已存储数据是否相同包括：

按各所述待存储数据的热度值大小顺序判断所述待存储数据与所述本地存储中所述指纹值对应的已存储数据是否相同。

本申请还提供一种数据存储系统，包括：

第一判断模块，用于接收到待存储数据的指纹值时，判断本地存储中是否存在所述指纹值；

独立存储模块，用于所述第一判断模块判断结果为否时，将所述待存储数据存入独立存储区；