[发明专利]一种基于GlusterFS的高容错分布式存储方法

权利要求书

1.一种基于GlusterFS的高容错分布式存储方法，包括：

步骤101、搭建GlusterFS集群，并创建包含若干存储节点的Distributed类型数据卷，设置数据卷阈值，数据文件夹将以文件夹为单位分布存储在数据卷中；

步骤102、在所有节点中创建数据文件夹；

步骤103、寻找最优节点，包括：步骤1031、扫描数据卷的所有节点的可用容量大小和已经存储数据的容量大小，步骤1032、查看所有节点的可用容量大小是否大于数据卷阈值，如果都小于阈值则选择可用容量最大的节点为最优节点；如果存在可用容量大于阈值的节点则在可用容量大于阈值的节点中选择已经存储数据最少的节点作为最优节点；

将最优节点上创建的所述数据文件夹的哈希区间定为最大，使所有的文件哈希值落在所述最优节点上，以使所述数据文件夹的所有文件都存储在所述最优节点上，其他节点上创建的所述数据文件夹的哈希区间设置为0，以使所述数据文件夹的所有文件哈希值不会落在这些其他节点的哈希区间内；

步骤104、在每个节点创建的所述数据文件夹的扩展属性trusted.GlusterFS.dht中记录分配到的哈希区间；

步骤105、使用GlusterFS环境下的哈希计算方法，根据创建的将要存储的所述数据文件夹中某个文件的文件名计算哈希值；

步骤106、根据计算得出的文件的哈希值，查看所有节点的所述数据文件夹的扩展属性中记录的已被分配到的哈希区间，确定计算得出的文件的哈希值所在的节点；

步骤107、在确定的待存储节点上的所述数据文件夹下创建文件；依据相同的方法完成其他文件的创建，完成数据文件夹的存储。

2.如权利要求1所述的方法，当数据卷已经存储一定量数据时新增节点使得数据不均衡时，执行再均衡操作使所有节点的负载均衡，所述再均衡操作具体包括：

步骤a、当用户进行再均衡操作时，遍历所有节点，对每个节点，查看其可用容量是否大于数据卷创建时配置的阈值，如该节点可用容量大于阈值，则该节点数据不需要均衡，遍历下一个节点；否则，进行步骤b对该节点进行数据均衡；当数据卷中的所有节点都被遍历后结束再均衡操作；

步骤b、循环迁移需要进行数据均衡的节点的最小数据文件夹，每次找到大小最小的数据文件夹，寻找数据卷中的最优节点，如果最优节点可用容量也小于阈值，则整个数据均衡操作结束；否则，进行步骤c迁移所述最小数据文件夹到最优节点上；

步骤c、对需要迁移的数据文件夹中的每个文件，将其复制到确定出的最优节点上的对应文件夹中，所述对应文件夹在创建文件夹的时已在每个节点都已被创建；

步骤d、在需要迁移的文件夹下的所有文件复制完成后，重新设置文件夹的扩展属性trusted.GlusterFS.dht表示的哈希区间，将文件被迁移到的节点上文件夹的哈希区间设置为最大，而把文件迁出的节点上文件夹的哈希区间设置为最小，删除文件迁出的节点上文件夹下的所有文件，该数据文件夹迁移完成，再次判断文件迁出的节点的可用容量是否大于数据卷阈值，如果是，则遍历数据卷的下一个节点，否则，重复步骤b。

3.如权利要求2所述的方法，步骤b中寻找数据卷中的最优节点进一步包括扫描数据卷的所有节点的可用容量大小和已经存储数据的容量大小，查看所有节点的可用容量大小是否大于数据卷阈值，如果都小于阈值则选择可用容量最大的节点为最优节点；如果存在可用容量大于阈值的节点则在可用容量大于阈值的节点中选择已经存储数据最少的节点作为最优节点。