[发明专利]一种基于分布式存储单元管理系统和方法

说明书

本发明公开了一种基于分布式存储单元管理系统，包括：若干信息管理服务中心，所述信息管理中心中包括一个主信息管理中心和多个从信息管理中心，所述主信息管理中心用于建立并管理段单元与从信息管理中心之间的映射关系，所述从信息管理中心用于管理段单元。本发明同时还公开了一种方法，通过设置多个信息管理中心来管理段单元，主信息管理中心为从信息管理中心分配若干段单元以便管理，同时主信息管理中心还将从信息管理中心与段单元的映射关系记录下来，整个存储系统呈现分布式管理的结构，具有更好的安全性和可靠性，同时，由于信息管理中心为多个，可以采用性能普通的服务器来充当信息管理中心，因此可以有效地降低成本。

技术领域

本发明属于数据存储领域，更具体地说，涉及一种基于分布式存储单元管理系统和方法。

背景技术

分布式的块存储系统中，为了数据的安全，通过为段单元(segment unit)制作副本来实现数据的多备份和安全性。关于如何管理段单元，并在段单元出现丢失或损毁的时候能快速感知到，传统的分布式块存储管理采用如图2所示的单节点管理，即所有的数据节点(datanode)定时将自己的段单元的数据信息上报到信息管理服务器，信息管理服务器按照卷的组成，存储和管理所有的段单元，段单元所在的数据节点定时向一个信息管理服务器上报数据信息，信息管理服务器收集和管理段单元的数据信息，就能实时知道每个段单元的状态。

但是随着段单元的增多，对应的信息管理服务器需要的内存等资源都会跟着增加，造成成本的增加。同时在目前存储系统大集群发展的趋势下，段单元的数量非常多，单个节点的信息管理服务器的处理能力存在上限，在段单元数量大到一定程度时，根本来不及处理；而且如果单节点出现故障，段单元的数据信息需要重新收集，这样会耗费过多的时间，而且系统的稳定性也较差。

申请公布日为2019年1月4日，申请公布号为CN109151057A，专利名称为一种智能分布式存储集群管理的方法的中国专利公开了一种技术方案，通过设置缓存模块；将集群管理所需数据存储在缓存模块中；接收其他集群数据调用请求；根据上述数据调用请求，将缓存模块中存储的数据进行数据返回。本发明公开的智能分布式存储集群管理的方法，通过新增一个缓存模块，当收到来自其他集群的请求时，将定时缓存数据返回，不再直接调用命令，减轻系统的资源消耗，提高系统的效率。

不同于上述技术方案，为了解决目前分布式存储系统存在的可靠性差、处理速度不够的问题，本发明提供一种基于分布式存储单元管理方法。

发明内容

1.要解决的问题

针对现有技术中分布式存储系统存在的可靠性差、处理速度不够的问题，本发明提供一种基于分布式存储单元管理系统和方法。

2.技术方案

为了解决上述问题，本发明所采用的技术方案如下：一种基于分布式存储单元管理系统，包括：若干信息管理服务中心，所述信息管理中心中包括一个主信息管理中心和多个从信息管理中心，所述主信息管理中心用于建立并管理段单元与从信息管理中心之间的映射关系，所述从信息管理中心用于管理段单元。本技术方案通过设置多个信息管理中心来管理段单元，其中，同一时间只有一个主信息管理中心，其余的为从信息管理中心，主信息管理中心为从信息管理中心分配若干段单元以便管理，同时主信息管理中心还将从信息管理中心与段单元的映射关系记录下来，整个存储系统呈现分布式管理的结构，具有更好的安全性和可靠性，同时，由于信息管理中心为多个，可以采用性能普通的服务器来充当信息管理中心，因此可以有效地降低成本。

进一步地，当段单元没有对应的信息管理中心时，则向主信息管理中心上报，主信息管理中心收到段单元上报的信息后，将该段单元分配给从信息管理中心进行管理，并为其建立映射关系表记录两者之间的映射关系。在系统一开始启动主信息管理中心尚未建立映射关系表的时候，所有的段单元都向主信息管理中心上报，主信息管理中心将该段单元分配给从信息管理中心进行管理，并为其建立映射关系表记录两者之间的映射关系，建立映射关系后，段单元直接向从信息管理中心上报，以便管理。