[发明专利]基于文件内容哈希值的分布式存储方法

说明书

一种基于文件内容哈希值的分布式存储方法，包括：步骤1，客户端通过哈希算法得到所要上传的文件内容的第一哈希值，向文件应用服务器发送带有第一哈希值的写请求；步骤2，文件应用服务器接收来自客户端带有第一哈希值的写请求，查找文件记录数据库中的映射表；步骤3，文件应用服务器通过哈希算法得到该文件内容的第二哈希值，并将第二哈希值与第一哈希值进行比较；步骤4，文件应用服务器查找文件存储数据库中的映射表；若己存在该文件的映射记录，则向客户端返回该文件已上传过的结果；若不存在该文件的映射记录，则将该文件写入文件存储数据库。本发明具有如下优势：节省存储空间；有效降低机器负载，大大提高文件存储系统吞吐量。

技术领域

本发明涉及计算机存储技术领域，特别是一种基于文件内容哈希值的分布式存储方法。

背景技术

在互联网应用中，文件存储是比较常用的一个服务模块，无论是图片、音频、视频、Excel或PDF文档都会用到文件存储服务，由此可见，文件存储服务模块在互联网应用的广泛性和重要性。而传统的文件存储方法是按照文件上传日期创建目录存储，文件存储的位置比较集中，这样对磁盘的读写压力比较大，文件存储服务器负载也会很高，造成文件存储吞吐量低，在文件读或写高峰的时候，容易达到系统瓶颈。

发明内容

针对上述技术缺陷，本发明的目的在于提供一种解决上述技术问题的基于文件内容哈希值的分布式存储方法。

为解决上述技术问题，本发明提供的基于文件内容哈希值的分布式存储方法，包括：步骤1，客户端通过哈希算法得到所要上传的文件内容的第一哈希值，向文件应用服务器发送带有第一哈希值的写请求；

步骤2，文件应用服务器接收来自客户端带有第一哈希值的写请求，查找文件记录数据库中的映射表；若己存在该文件的映射记录，则向客户端返回该文件已上传过的结果及该文件在文件存储数据库中的访问地址；若不存在该文件的映射记录，则同意客户端向文件应用服务器上传该文件；

步骤3，文件应用服务器通过哈希算法得到该文件内容的第二哈希值，并将第二哈希值与第一哈希值进行比较；若第二哈希值与第一哈希值的值不同，则将第二哈希值与第一哈希值的值不同的结果返回客户端并返回步骤1，若第二哈希值与第一哈希值的值相同，则进入步骤4；

步骤4，文件应用服务器查找文件存储数据库中的映射表；若己存在该文件的映射记录，则向客户端返回该文件已上传过的结果；若不存在该文件的映射记录，则将该文件写入文件存储数据库。

步骤4包括：

步骤4.1，文件应用服务器计算得到文件存储数据库中可写入的存储目录；

步骤4.2，文件应用服务器将该文件写入该存储目录并向客户端返回结果。

步骤4.1包括：

步骤4.1.1，文件应用服务器根据该文件的第二哈希值或第一哈希值的前2位字符和文件存储数据库中的文件存储服务器的ID和存储空间情况，计算得到可写入的文件存储服务器；

步骤4.1.2，文件应用服务器根据该文件的第二哈希值或第一哈希值的前3位至6位字符计算得到该文件存储服务器中用于写入该文件的存储目录。

步骤4.2中，将该文件写入该存储目录下；若写入失败，则向客户端返回写入失败的结果，若写入成功，则向客户端返回写入成功的结果。

步骤4.2中，将该文件以哈希值为名字写入该存储目录下。

步骤4.2中，将该文件写入该存储目录下，写入的最大尝试次数为三次。

步骤4.2中，写入成功的结果包括该文件内容的哈希值，文件存储服务器的ID、存储目录、保存成功的结果和该文件的访问地址。