[发明专利]一种数据分级存储方法及装置

说明书

本发明提供一种数据分级存储方法及装置，上述方法包括以下步骤：采用第一级存储区和第二级存储区分别用于存储数据，提高了存储性能并降低了存储成本，解决了lustre单节点故障问题以及Nvme ssd成本过高的问题。

技术领域

本发明属于计算机领域，尤其涉及一种数据分级存储方法及装置。

背景技术

Lustre是HP，Intel，Cluster File System公司联合美国能源部开发的Linux集群并行文件系统。Lustre采用分布式的锁管理机制来实现并发控制，元数据和文件数据的通讯链路分开管理，是为解决海量存储问题而设计的全新文件系统，是下一代的集群文件系统，可支持10,000个节点，PB的存储量，100GB/S的传输速度，完美的安全性和可管理性。

2011年时，Non-Volatile Memory Express非易失性存储器标准即NVMe规范正式出炉，这是专门针对NVND闪存和下一代存储设备所提出的规范。它基于闪存的特点而研发，其目的是尽可能缩小存储系统和内存带宽之间的差距。

Lustre消除了传统网络文件系统在可扩展性、可用性和性能上的问题，NVMe和PCI-E非常适合SSD高性能的需求，NVM作为专门为闪存设计的协议，通过高带宽的PCI-E通道，能够充分发挥出SSD的性能。但该方案存在lustre单节点故障问题，以及Nvme SSD成本过高，不适合用于大容量存储介质。

因此，迫切需要提供一种高效的数据存储方案，来解决lustre单节点故障问题。

发明内容

本发明提供一种数据分级存储方法及装置，以解决上述问题。

本发明提供一种数据分级存储方法，应用于基于Lustre文件系统。上述方法包括以下步骤：

采用第一级存储区和第二级存储区分别用于存储数据。

本发明还提供一种数据分级存储装置，包括：应用于基于Lustre文件系统，包括：第一级存储区和第二级存储区，分别用于存储数据。

通过以下方案：采用第一级存储区和第二级存储区分别用于存储数据，提高了存储性能并降低了存储成本，解决了lustre单节点故障问题以及Nvme ssd成本过高的问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1所示为本发明实施例1的数据分级存储方法处理流程图；

图2所示为本发明实施例2的数据分级存储装置结构图；

图3所示为本发明实施例3的数据分级存储装置结构图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

图1所示为本发明实施例1的数据分级存储方法处理流程图，包括以下步骤：

步骤102：采用第一级存储区和第二级存储区分别用于存储数据。

进一步地，所述第一级存储区包括单节点lustre文件系统和基于Nvme传输协议的硬盘，所述第二存储区包括HA lustre文件系统和机械硬盘。

进一步地，所述第一存储区与所述第二存储区之间使用两套网络连接，所述两套网络分别用于传输管理数据和计算数据。

进一步地，用于传输管理数据的网络是以太网，用于传输计算数据的网络是IB网络。