[发明专利]数据存储管理的方法和装置

说明书

本申请公开了一种数据存储管理的方法，属于数据存储技术领域。所述方法包括：接收待存储的目标数据，基于预设的安全级别，将目标数据划分为多个数据段，并确定每个数据段的校验数据，存储每个数据段和对应的校验数据；在存储每个数据段和对应的校验数据后，每当达到预设的调整周期时，基于预设的分段数据量的提升步长，对目标数据当前的安全级别进行调整，得到调整后的安全级别；基于调整后的安全级别，将目标数据划分为多个数据段，并确定划分的每个数据段的校验数据，使用重新划分的每个数据段和对应的校验数据，替换已存储的每个数据段和对应的校验数据。采用本申请，可以有效解决在存储空间不够时，只能不断的增加存储设备的技术问题。

技术领域

本申请涉及数据存储技术领域，具体涉及一种数据存储管理的方法和装置。

背景技术

在常规的云存储系统中，用户的数据被分割为多个数据段，该多个数据段保存在存储服务器的多个节点中，为了防止节点发生故障时数据丢失，常常使用网络RAID(Redundant Arrays of Independent Disks，独立冗余磁盘阵列)对用户的数据进行跨节点保护。

目前常见的网络RAID的实现方式主要是基于EC(Erasure Code，纠删编码)技术，EC技术是一种数据保护方法，也是一种编码容错技术，它将数据分割成多个数据段，通过对多个数据段进行冗余编码，得到每个数据段对应的校验数据，每个数据段和其对应的校验数据分别包括若干个预设数据量的数据单元。每个数据段和对应的校验数据中包含的数据单元分别存储在不同的节点中，当部分节点发生故障的情况下，数据仍然可以恢复。根据检验数据的多少，数据往往具有不同的安全级别，数据的安全级别常常使用公式N+M来表征，其中N表征分段数据量，具体可以为单个数据段包含的数据单元的数量，M表征校验数据量，具体可以为校验数据包含的数据单元的数量，M和N为大于0的整数，且M小于或等于N。如果数据的安全级别为N+M，则在损坏不大于M个节点的情形下，数据仍然可以恢复。

在实现本申请的过程中，发明人发现相关技术至少存在以下问题：

在常规的云存储项目中，用户设置完数据的安全级别N+M之后，用户数据的空间利用率就被定死，即N/(N+M)，随着业务量的不断增加，在存储空间不够时，只能不断的增加存储设备，使得运营成本也随着业务量的增加而不断增加。

发明内容

为了解决相关技术中存在的技术问题，本申请实施例提供了一种提高存储空间利用率的方法和装置。所述提高存储空间利用率的方法和装置的技术方案如下：

第一方面，提供了一种提高存储空间利用率的方法，所述方法包括：

接收待存储的目标数据，基于预设的安全级别，将所述目标数据划分为多个数据段，并确定每个数据段的校验数据，存储每个数据段和对应的校验数据，其中，所述安全级别对应有分段数据量和校验数据量；

在存储所述每个数据段和对应的校验数据后，每当达到预设的调整周期时，基于预设的分段数据量的提升步长，对所述目标数据当前的安全级别进行调整，得到调整后的安全级别；

基于所述调整后的安全级别，将所述目标数据重新划分为多个数据段，并确定重新划分的每个数据段的校验数据，使用重新划分的每个数据段和对应的校验数据，替换已存储的每个数据段和对应的校验数据。

可选的，所述基于预设的分段数据量的提升步长，对所述目标数据当前的安全级别进行调整，得到调整后的安全级别，包括：

在保持当前的安全级别对应的校验数据量不变的基础上，将当前的安全级别对应的分段数据量，提升预设的分段数据量的提升步长，得到调整后的安全级别。

可选的，所述在存储所述每个数据段和对应的校验数据后，每当达到预设的调整周期时，基于预设的分段数据量的提升步长，对所述目标数据当前的安全级别进行调整，得到调整后的安全级别，包括：