[发明专利]数据分布存储方法及相关装置

说明书

本发明涉及分布式存储技术领域，提供一种数据分布存储方法及相关装置，所述方法包括：获取分布式存储系统的第一拓扑结构；根据归属于同一第一中间节点的OSD的权重，确定每个第一中间节点的权重；依据每个第一中间节点的权重及归属于同一第一中间节点的OSD的权重确定对应的每个OSD的分配比例；根据分配比例依次为每个OSD分配DMG，每个OSD上的DMG个数与每个OSD的权重匹配，且所有OSD上的DMG个数之和等于M。本发明依据分布式存储系统中与OSD容量成正比的OSD的权重，将分布式存储系统中DMG列表中的DMG均衡地分布在分布式存储系统中的每个OSD上，从而提高了分布式存储系统中数据分布的均衡度。

技术领域

本发明涉及分布式存储技术领域，具体而言，涉及一种数据分布存储方法及相关装置。

背景技术

分布式存储系统一般采用商业化通用存储服务器，利用存储管理软件把服务器上的硬盘虚拟化成存储资源池进行统一管理，可以提供包括块存储服务、文件存储服务、对象存储服务等融合存储服务。分布式存储系统由于其可扩展性、高性价比、高性能、数据高可靠性、业务灵活性高等方面的优势，目前发展迅速，在各行业中都有广泛应用。

在分布式存储系统中，待存储文件首先被切分成固定长度的文件块，通过将文件块映射至不同主机的不同对象存储设备OSD(Object Storage Device)，将文件块中的数据存储至对应OSD，最终实现将待存储文件中的数据存储至分布式存储系统中。

在分布式存储系统中，如何将待存储文件中的数据均衡地存储至不同主机的不同OSD上是本领域技术人员亟待解决的问题。

发明内容

本发明实施例的目的在于提供一种数据分布存储方法及相关装置，用于提高分布式存储系统中数据分布的均衡度。

为了实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明实施例提供了一种数据分布存储方法，应用于分布式存储系统中的存储节点，存储节点包括多个对象存储设备OSD，分布式存储系统存在数据管理组DMG列表，DMG列表包含M个DMG，M个DMG划分为K个DMG集合，每个DMG集合包含N个DMG；任意两个DMG集合具有关联关系的DMG互为备份；K个DMG集合依次排列，且每个DMG集合中的N个DMG的排列顺序一致，所述方法包括：获取分布式存储系统的第一拓扑结构，其中，第一拓扑结构包括叶子层和第一中间层，每个OSD为一个叶子节点，至少一个叶子节点构成叶子层，第一中间层包括多个第一中间节点，每个第一中间节点均有至少一个叶子节点归属于对应的第一中间节点；根据归属于同一第一中间节点的OSD的权重，确定每个第一中间节点的权重，其中，OSD的权重与OSD的容量大小成正比，其中，OSD的权重与OSD的容量大小成正比；依据每个第一中间节点的权重及归属于同一第一中间节点的OSD的权重确定对应的每个OSD的分配比例；根据分配比例依次为每个OSD分配DMG，每个OSD上的DMG个数与每个OSD的权重匹配，且所有OSD上的DMG个数之和等于M。