[发明专利]数据分块上传与存储系统及方法

权利要求书

1.一种数据分块上传与存储方法，应用于一台块传输分配器中，该块传输分配器通过网络连接多个客户端和一台存储服务器，其特征在于，该方法包括：

接收步骤，接收所述多个客户端同时上传的文件信息和文件的哈希列表，存储到哈希数据库中，每个文件对应一张哈希列表，所述哈希列表中记录了文件的多个数据块的名称、各数据块的哈希值及数据块的分割顺序；

设置步骤，设置各客户端中数据块的上传顺序；

判断步骤，判断所述哈希数据库中是否有与待传输数据块的哈希值相同的哈希值，且该相同的哈希值对应的数据块正在传输或已经传输完毕；

去重步骤，当有哈希值相同的数据块正在传输或已经传输完毕时，判定该数据块为重复数据块，跳过该重复数据块，确定上传顺序中的下一个数据块为该客户端的待传输数据块，流程返回至判断步骤；及

上传步骤，当哈希数据库中没有与待传输数据块的哈希值相同的哈希值，或者该哈希数据库中有与待传输数据块的哈希值相同的哈希值但该相同的哈希值对应的数据块未正在传输或未已经传输完毕时，通知用户将该待传输数据块上传至所述存储服务器的存储区中，该存储区内有多个数据区域。

2.如权利要求1所述的数据分块上传与存储方法，其特征在于，该方法还包括：

所述客户端将需要上传至存储服务器的文件分割成多个数据块，并按照分割顺序将该多个数据块的名称、各数据块的哈希值及数据块的分割顺序存入一张哈希列表中；及

上传该哈希列表至所述块传输分配器。

3.如权利要求1所述的数据分块上传与存储方法，其特征在于，该方法还包括：

存储服务器接收客户端通过块传输分配器上传的数据块；

将该通过校验的数据块写入存储区中；

校验各数据块的哈希值与哈希数据库中所存储的哈希列表内的相应数据块的哈希值是否相同；

当校验结果为相同时，将通过校验的各数据块的存储指针返回给相应的客户端，该存储指针是指数据块存储在所述存储区内的数据区域的编号；

当校验结果为不相同时，通知客户端重新上传数据块；及

当校验次数达到预设次数且校验结果仍为不相同时，通知客户端存储失败。

4.如权利要求1所述的数据分块上传与存储方法，其特征在于，所述文件信息包括文件的名称、文件的属性。

5.如权利要求1所述的数据分块上传与存储方法，其特征在于，当用户于客户端读取所述存储服务器中文件时，所述客户端执行以下步骤：

从哈希数据库中获取各数据块的哈希值；

根据各数据块的存储指针从存储区的相应数据区域内读取各数据块；

计算所读取的各数据块的哈希值，校验该各数据块的哈希值与从哈希数据库中获取的相应数据块的哈希值是否相同；

当校验结果为相同时，将通过校验的数据块按照分割顺序排列组合成文件；及

校验组合后文件的哈希值与客户端上传的文件的哈希值是否相同，当校验结果为相同时，将通过校验的文件返回给客户端的用户。

6.一种数据分块上传与存储系统，运行于一台块传输分配器中，该块传输分配器通过网络连接多个客户端和一台存储服务器，其特征在于，该系统包括：

接收模块，用于接收所述多个客户端同时上传的文件信息和文件的哈希列表，存储到哈希数据库中，每个文件对应一张哈希列表，所述哈希列表中记录了文件的多个数据块的名称、各数据块的哈希值及数据块的分割顺序；

设置模块，用于设置各客户端中数据块的上传顺序；

判断模块，用于判断所述哈希数据库中是否有与待传输数据块的哈希值相同的哈希值，且该相同的哈希值对应的数据块正在传输或已经传输完毕；

去重模块，用于当有哈希值相同的数据块正在传输或已经传输完毕时，判定该数据块为重复数据块，跳过该重复数据块，确定上传顺序中的下一个数据块为该客户端的待传输数据块；及

上传模块，用于当哈希数据库中没有与待传输数据块的哈希值相同的哈希值，或者该哈希数据库中有与待传输数据块的哈希值相同的哈希值但该相同的哈希值对应的数据块未正在传输或未已经传输完毕时，通知用户将该待传输数据块上传至所述存储服务器的存储区中，该存储区内有多个数据区域。