[发明专利]多云集群数据管理系统、方法及装置

说明书

本公开涉及一种多云集群数据管理系统、方法及装置，所述多云集群数据管理系统包括多个云集群，第一管理层用于，响应于接收到数据写入请求，确定该数据写入请求对应的第一数据集待写入的第一集群；根据第一数据集标识以及第一集群标识写入第一元数据；将该数据写入请求转发至该第一集群；该第二管理层用于，响应于接收到该数据写入请求，接收该第一数据集；对该第一数据集进行第一操作后发送至第三管理层；根据第一操作写入相应的第二元数据；该第三管理层用于，响应于接收到进行第一操作之后的该第一数据集，对该第一数据集执行第二操作后进行数据落盘，并根据该第二操作以及数据落盘信息写入相应的第三元数据。

技术领域

本公开涉及多云管理领域，具体地，涉及一种多云集群数据管理系统、方法及装置。

背景技术

在相关技术中，为保证用户对数据具有唯一正确视角，元数据通常跨云集中保存。这种方案导致数据读写时，虽然数据本身无需进行跨云访问，但是却不得不频繁跨云访问元数据，导致数据读写性能差，同时对元数据管理服务造成巨大压力。

发明内容

为了解决相关技术中存在的问题，本公开提供一种多云集群数据管理系统、方法及装置。

为了实现上述目的，本公开第一方面提供一种多云集群数据管理系统，所述多云集群数据管理系统包括多个云集群，所述多个云集群中包括配置有第一管理层作为中央控制集群的一个云集群，并且，所述多个云集群中每一云集群中均配置有一第二管理层以及第三管理层；

所述第一管理层用于，响应于接收到数据写入请求，确定所述数据写入请求对应的第一数据集待写入的第一集群；根据第一数据集标识以及第一集群标识写入第一元数据；将所述数据写入请求转发至所述第一集群；

所述第二管理层用于，响应于接收到所述数据写入请求，接收所述第一数据集；对所述第一数据集进行第一操作后发送至第三管理层；根据第一操作写入相应的第二元数据，所述第一操作包括数据分块、数据快照，所述第二元数据包括所述第一数据集的文件目录结构、快照元数据、快照与文件的关联信息元数据的一者或多者；

所述第三管理层用于，响应于接收到进行第一操作之后的所述第一数据集，对该第一数据集执行第二操作后进行数据落盘，并根据所述第二操作以及数据落盘信息写入相应的第三元数据，所述第二操作是根据该第三管理层所处的集群的存储系统确定的。

可选地，所述第一管理层用于，响应于接收到数据读取请求，根据第一元数据确定所述数据读取请求对应的第二数据集所在的第二集群；将所述数据读取请求转发至所述第二集群；

所述第二管理层用于，响应于接收到所述数据读取请求，确定所述第二数据集对应的第二元数据；

所述第三管理层用于，根据所述第二数据集对应的第二元数据以及第三元数据，读取所述数据读取请求对应的数据，以使得所述第二集群将该数据发送至目标用户。

可选地，所述第一管理层用于，响应于接收到数据同步请求，确定所述数据同步请求对应的第三数据集所在的第三集群，以及待同步的第四集群，并增加相应的第一元数据，并将所述数据同步请求转发至所述第四集群；

所述第二管理层用于，响应于接收到所述数据同步请求，根据所述第三数据集在所述第三集群中对应的第二元数据，在当前集群中写入对应的第二元数据；

所述第三管理层用于，根据所述第三数据集在所述第三集群中的第二元数据以及第三元数据，获取所述数据同步请求对应的数据，并对该数据执行第二操作后进行数据落盘，并根据所述第二操作以及数据落盘信息写入相应的第三元数据。

可选地，所述第一管理层还用于，响应于接收到针对第五集群的第一读取请求，确定所述第五集群中是否存储有所述第一读取请求对应的数据集；

在所述第五集群中未存储有所述第一读取请求对应的数据集的情况下，确定存储有所述第一读取请求对应的数据集的第六集群；并，