[发明专利]数据存储方法、装置、数据存储系统及可读存储介质

说明书

在本申请实施例提供一种数据存储方法、装置、数据存储系统及可读存储介质，所述方法包括：首先，接收客户端发送的待存储数据，将所述待存储数据写入副本存储池进行副本存储；其次，在所述待存储数据成功写入所述副本存储池时，向所述客户端发送数据写入成功的响应；最后，将所述副本存储池中存储的至少部分数据发送到纠删码存储池并通过纠删码存储所述至少部分数据。上述方法将待存储数据先写入存储速度快的副本存储池以确保客户端能及时收到数据写入成功的响应，给用户数据存入速率快的良好体验，同时，将副本存储池中的数据发送到纠删码存储池中存储，可以降低数据存储的冗余度，提高数据的存储空间利用率。

技术领域

本申请涉及分布式存储技术领域，具体而言，涉及一种数据存储方法、装置、数据存储系统及可读存储介质。

背景技术

现有技术中，分布式存储可实现海量数据的存储。对于海量存储系统来说，数据的冗余度是一个重要指标。冗余度是指一存储对象的实际存储的数据量与该存储对象自身的数据量的比值。副本存储方式可提升数据的安全性和可靠性，但是存在高冗余的问题。高冗余带来高可靠性的同时，意味着更多空间的“浪费”，以及更高的存储成本。很多用户相比于性能和可靠性来说，更加注重成本，对于副本这种奢侈的高性能、高可靠是不能接受的。因此纠删码存储策略出现了。然而，纠删码存储策略虽然可以解决高冗余的问题，但是伴随大量的计算，使得纠删码存储方式相比于副本存储方式来说，数据存入效率要低很多。

发明内容

本申请的实施例描述一种数据存储方法、装置、数据存储系统及可读存储介质。

第一方面，本申请实施例提供一种数据存储方法，应用于数据存储系统，该数据存储系统包括副本存储池和纠删码存储池，所述方法包括：首先，接收客户端发送的待存储数据，将所述待存储数据写入所述副本存储池进行副本存储；其次，在所述待存储数据成功写入所述副本存储池时，向所述客户端发送数据写入成功的响应；最后，将所述副本存储池中存储的至少部分数据发送到所述纠删码存储池并通过纠删码存储所述至少部分数据。上述方法将待存储数据先写入存储速度快的副本存储池以确保客户端能及时收到数据写入成功的响应，给用户数据存入速率快的良好体验，同时，将副本存储池中的数据发送到纠删码存储池中存储，可以降低数据存储的冗余度，提高存储空间利用率。

可选地，在上述方法中，所述将所述副本存储池中存储的至少部分数据发送到所述纠删码存储池并通过纠删码存储所述至少部分数据，可以包括：

检测所述副本存储池中已存储数据的容量是否达到预设容量阈值；

当达到所述预设容量阈值时，将所述副本存储池中存储的至少部分数据发送到所述纠删码存储池以纠删码的形式进行存储。

可选地，上述方法还包括：当副本存储池中已存储数据的容量达到预设容量阈值时，调整所述副本存储池从客户端接收数据的速率和向纠删码存储池发送数据的速率的比例，使所述副本存储池在单位时间内接收的数据量不大于向所述纠删码存储池发送的数据量。

可选地，在接收客户端发送的待存储数据，将所述待存储数据写入所述副本存储池并进行副本存储之前，所述方法还包括：

创建所述副本存储池及所述纠删码存储池，所述副本存储池用于对所述客户端发送的待存储数据进行副本存储，所述纠删码存储池用于对所述副本存储池发送到所述纠删码存储池的数据进行纠删码存储。

可选地，在上述方法中，所述将所述副本存储池中存储的至少部分数据发送到所述纠删码存储池并通过纠删码存储所述至少部分数据，可以包括：

获取所述副本存储池中已存储数据的活跃度；

根据所述已存储数据的活跃度选择所述副本存储池中存储的至少部分数据发送到所述纠删码存储池。

可选地，在上述方法中，获取所述副本存储池中已存储数据的活跃度，包括：