[发明专利]储存数据的方法及装置

说明书

技术领域

本发明涉及电子信息技术领域，尤其涉及一种储存数据的方法及装置。

背景技术

分布式存储技术是一种常用的数据存储技术，在分布式存储场景下，可以将系统中所有的硬盘作为一个存储资源池进行统一的管理，在系统对数据进行读写和存储时都是将整个存储资源池作为一个存储区域进行数据交互的。例如：

分布式存储系统可以将一个虚拟卷映射到存储资源池中的全部硬盘上，并会卷上的空间划分为若干个1M大小的数据块，每个数据块对应资源池中的全部硬盘中的一个块存放逻辑分区单元Partition。当Partition有多个副本时，一个Partition内的全部数据会被保存多份，比如：在双副本的场景下，每个数据块对应资源池中的全部硬盘中的二个Partition，并且这2个Partition的内容完全相同。在根据常用的分配算法，相同的二个Partition如：P1和P1’，往往会被分配在二个不同的硬盘上如：P1在硬盘1，P1’在硬盘2，使Partition可以被平均地分配在整个资源池中，由于这种分配Partition的方式能够使资源池中硬盘的读写速度最大化，从而被广泛地采用。

当分布式存储系统中任意一个硬盘损坏时，可以进行数据重建，例如:硬盘1损坏，由于硬盘1上的P1、P4’、P5、P8’在硬盘2、3、4上都有对应的副本，则可以通过硬盘2、3、4上都对应的副本修复硬盘1的数据。

在现有的分布式存储系统中任意一个硬盘损坏，会进行数据重建，在进行数据重建的过程中，若存储资源池中其他硬盘再故障，则整个虚拟卷的数据就会损坏，例如：如图1所示，在硬盘1损坏并开始进行数据修复时，若硬盘2在损坏，则储存在硬盘2上的用于修复硬盘1的对应的副本P1’就会损坏，从而无法修复数据，导致整个虚拟卷的数据损坏，降低了数据的安全性。

发明内容

本发明的实施例提供一种储存数据的方法及装置，能够将存储系统中的所有的存储设备划分为至少二个资源池，并将数据储存在所划分出的资源池中，由于各个资源池中的数据是独立的，只有同一个资源池中的2个存储设备损坏，数据才会完全损坏，从而降低了数据完全损坏的几率，提高了数据的安全性。

为达到上述目的，本发明的实施例采用如下技术方案：

第一方面，本发明的实施例提供了一种储存数据的方法，用于存储系统，所述存储系统中包括用于存储数据的资源池，所述资源池被逻辑划分为至少2个子资源池，每个子资源池中包括相邻的N个存储设备，N≥2，所述方法包括：

将需要存储的数据划分为R个切片，将R个所述切片分布到划分的所述子资源池中，所述需要存储的数据期望生成的副本数量小于N，R≥2；

对分布到每个子资源池中的每个所述切片生成副本切片，并将所述副本切片存储在对应所述切片所属的子资源池中，所述副本切片与数据相同的所述切片相互对应。

结合第一方面，在第一方面的第一种可能的实现方式中，所述将所述副本存储在对应所述切片所属的子资源池中包括：将所述副本切片存储到对应所述切片所属的子资源池中的存储设备上，且每个所述副本切片存储的存储设备与对应所述切片存储的存储设备不同，数据相同的副本切片存储在不同的存储设备上。

结合第一方面，以及第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中，还包括：将所述划分的子资源池再次划分为不同级别子资源池集合，每个子资源池集合中包括至少一个子资源池，不同级别的子资源池集合中每个所述切片的期望生成的副本切片数量不同；

所述对分布到每个子资源池中的每个所述切片生成副本切片，包括：按照子资源池所属子资源池集合的级别所对应的每个所述切片期望生成的副本切片数量，将分布到子资源池中的每个所述切片生成对应数量的副本切片。

结合第一方面，以及第一方面的第一种可能的实现方式，在第一方面的第三种可能的实现方式中，在将所述副本切片存储在对应所述切片所属的子资源池中后，还包括：

针对任一个所述子资源池，当减少所述子资源池中的存储设备的数量时，将所减少的存储设备中的所述切片分配到所述子资源池中的其他存储设备上，所述子资源池中的剩余的存储设备数量大于所述期望生成的副本数。

结合第一方面，以及第一方面的第一种可能的实现方式，在第一方面的第四种可能的实现方式中，在将所述副本切片存储在对应所述切片所属的子资源池中后，还包括：

针对任一个所述子资源池，当增加所述子资源池中的存储设备的数量时，将该子资源池中的所述切片的副本切片重新分配到该子资源池中的存储设备上。