[发明专利]压实优化方法、装置、分布式存储设备以及存储介质

权利要求书

1.一种压实优化方法，其特征在于，应用于分布式存储系统，所述分布式存储系统包括位于输入输出IO路径上的路由层和位于内存中的逻辑存储层，所述逻辑存储层包括多个逻辑存储单元，所述逻辑存储单元包含有序数据结构段和压实子单元，所述压实优化方法包括：

通过路由层的路由节点对写IO数据与所述多个逻辑存储单元分别进行调度；

将所述写IO数据写入对应的逻辑存储单元中的有序数据结构段；

在所述有序数据结构段内积累数据量满足预设条件的情况下，将所述有序数据结构段的工作模式转换为只读模式；

通过所述压实子单元生成的压实进程对所述逻辑存储单元中只读模式的有序数据结构段内的数据进行合并操作，并且将合并后的数据下刷至磁盘。

2.根据权利要求1所述的压实优化方法，其特征在于，所述通过所述路由层的路由节点对所述写IO数据与所述多个逻辑存储单元分别进行调度，包括：

基于预设的路由策略，通过所述路由层的路由节点将所述多个逻辑存储单元分别调度至集群中多个节点，以及将所述写IO数据调度中所述多个节点中的第一空闲节点。

3.根据权利要求2所述的压实优化方法，其特征在于，在所述有序数据结构段内积累数据量满足预设条件的情况下，将所述有序数据结构段的工作模式转换为只读模式之后，还包括：

基于预设的压实策略触发压实子单元生成压实进程；

将所述压实进程调度至除所述第一空闲节点以外的第二空闲节点。

4.根据权利要求1所述的压实优化方法，其特征在于，在所述通过所述路由层的路由节点对写IO数据与所述多个逻辑存储单元分别进行调度之后，还包括：

将每个所述逻辑存储单元分别与对应节点的处理器进行绑定。

5.根据权利要求1所述的压实优化方法，其特征在于，在所述通过所述压实子单元生成的压实进程对所述逻辑存储单元中只读模式的有序数据结构段内的数据进行合并操作，并且将合并后的数据下刷至磁盘后，还包括：

更新所述逻辑存储单元包含的有序数据结构段。

6.根据权利要求1所述的压实优化方法，其特征在于，在所述通过所述压实子单元生成的压实进程对所述逻辑存储单元中只读模式的有序数据结构段内的数据进行合并操作，并且将合并后的数据下刷至磁盘后，还包括：

在各个节点内存的使用率达到预设值的情况下，对所述集群进行扩容。

7.根据权利要求1所述的压实优化方法，其特征在于，在所述通过所述压实子单元生成的压实进程对所述逻辑存储单元中只读模式的有序数据结构段内的数据进行合并操作，并且将合并后的数据下刷至磁盘后，还包括：

在出现IO阻塞的情况，启用自我保护机制限制超过集群承载能力的IO进入集群。

8.一种压实优化装置，其特征在于，应用于分布式存储系统，所述分布式存储系统包括位于输入输出IO路径上的路由层和位于内存中的逻辑存储层，所述逻辑存储层包括多个逻辑存储单元，所述逻辑存储单元包含有序数据结构段和压实子单元，包括：

调度模块，用于通过所述路由层的路由节点对写IO数据与所述多个逻辑存储单元分别进行调度；

写入模块，将所述写IO数据写入对应的逻辑存储单元中至少一个有序数据结构段中；

转换模块，用于在所述有序数据结构段内积累数据量满足预设条件的情况下，将所述有序数据结构段的工作模式转换为只读模式；

合并模块，用于通过所述压实子单元生成的压实进程对所述只读模式的有序数据结构段中的数据进行合并操作，并且将合并后的数据下刷至磁盘。

9.一种分布式存储设备，其特征在于，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-7任意一项所述的压实优化方法的操作。

10.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一可执行指令，所述可执行指令在分布式存储设备上运行时，使得分布式存储设备执行如权利要求1-7任意一项所述的压实优化方法的操作。