[发明专利]数据处理方法、存储节点及分布式存储系统

说明书

本申请公开一种应用于存储节点的数据处理方法，包括：接收文件写入请求；响应文件写入请求，确定该存储节点是否存储有与待写入的第一数据块相同的数据块；若未存储相同的数据块，则将第一数据块存储于该存储节点，建立第一数据块的索引信息，建立第一数据块的块号和索引信息的对应关系；若存储有相同的另一数据块，则修改该另一数据块的索引信息中的引用次数，建立第一数据块的块号和该索引信息的对应关系。基于本申请公开的数据处理方法，能够缩短文件的写入响应时间，提高分布式存储系统的写性能，同时能够避免存储节点出现重复数据块。本申请还公开存储节点及分布式存储系统。

技术领域

本申请属于通信技术领域，尤其涉及数据处理方法、存储节点及分布式存储系统。

背景技术

分布式存储系统是将数据分散存储在多台服务器上，其中，用于存储数据的服务器称为存储节点，一个分布式存储系统包括多个存储节点。分布式存储系统利用多个存储节点分担存储负荷，能够提高系统的可靠性、可用性和存取效率，而且系统结构便于扩展。

但是，目前的分布式存储系统仍然存在读写性能较低的问题，这导致文件的读写响应时间较长。如何进一步提高分布式存储系统的读写性能，以便缩短文件的读写响应时间，是本领域技术人员亟待解决的问题。

发明内容

有鉴于此，本申请的目的在于提供数据处理方法、存储节点及分布式存储系统，以便提高分布式存储系统的读写性能，缩短文件的读写响应时间。

为实现上述目的，本申请提供如下技术方案：

一方面，本申请提供一种数据处理方法，应用于分布式存储系统的第一存储节点，所述方法包括：

接收文件写入请求；

响应所述文件写入请求，确定所述第一存储节点是否存储有与待写入的第一数据块相同的数据块，所述第一数据块通过对待写入的文件进行分块处理产生；

在所述第一存储节点未存储与所述第一数据块相同的数据块的情况下，将所述第一数据块存储于所述第一存储节点，在所述第一存储节点建立所述第一数据块的索引信息，建立所述第一数据块的块号和所述索引信息的对应关系；

在所述第一存储节点存储有与所述第一数据块相同的另一数据块的情况下，修改所述另一数据块的索引信息中的引用次数，建立所述第一数据块的块号和与所述另一数据块的索引信息的对应关系；

其中，数据块的索引信息包括所述数据块的存储地址信息。

可选的，在上述数据处理方法的基础上，还包括：

在满足预设条件的情况下，确定所述分布式存储系统的全局索引信息是否包含所述第一数据块的索引信息；

在所述全局索引信息包含所述第一数据块的索引信息的情况下，删除所述第一存储节点存储的第一数据块，修改所述全局索引信息中所述第一数据块的索引信息中的引用次数，删除所述第一存储节点存储的第一数据块的索引信息；

在所述全局索引信息不包含所述第一数据块的索引信息的情况下，在所述全局索引信息中添加所述第一数据块的索引信息。

可选的，在上述数据处理方法的基础上，还包括：

接收文件读取请求；

响应所述文件读取请求，对待读取的文件进行分块处理，获得待读取的数据块的块号；

根据所述待读取的数据块的块号在所述第一存储节点查找所述待读取的数据块的索引信息；

如果在所述第一存储节点查找到所述待读取的数据块的索引信息，则根据查找到的索引信息中的存储地址信息读取数据块；