[发明专利]一种数据重建方法、系统、装置及计算机可读存储介质在审
申请号: | 201811215841.9 | 申请日: | 2018-10-18 |
公开(公告)号: | CN111078119A | 公开(公告)日: | 2020-04-28 |
发明(设计)人: | 霍道安;陈智 | 申请(专利权)人: | 深信服科技股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/16 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518055 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 重建 方法 系统 装置 计算机 可读 存储 介质 | ||
1.一种数据重建方法,其特征在于,应用于新GlusterFS,包括:
任务中心通过与各磁盘之间的心跳连接确定存在的故障磁盘,并根据所述故障磁盘的文件分布信息确定待重建文件列表,且计算得到目标替换磁盘;
所述任务中心将包含有所述待重建文件列表和所述目标替换磁盘的数据重建任务下发至文件系统;
所述文件系统为接收到的数据重建任务创建一个数据重建协程;
所述数据重建协程判断是否存在与所述待重建文件列表对应的可用的数据重建源;
若是,则所述数据重建协程将所述数据重建源复制至所述目标替换磁盘,并在复制完成后,向副本组管理模块上报重建完成信号;
所述副本组管理模块根据所述重建完成信号使用所述目标替换磁盘更新所述待重建文件列表中各数据文件的路由信息。
2.根据权利要求1所述的数据重建方法,其特征在于,所述文件系统为接收到的数据重建任务创建一个数据重建协程,包括:
当所述任务中心在同一时刻批量下发多个数据重建任务时,所述文件系统为接收到的每个数据重建任务分别创建一个数据重建协程。
3.根据权利要求2所述的数据重建方法,其特征在于,所述数据重建协程将所述数据重建源复制至所述目标替换磁盘,并在复制完成后,向副本组管理模块上报重建完成信号,包括:
每个所述数据重建协程分别将各自对应的数据重建源拆分为多个数据分片,并将各所述数据分片分配给相应数量的协程子任务;
每个所述数据重建协程控制隶属于自身的各协程子任务以并行的方式同时将各所述数据分片复制至所述目标替换磁盘,并在隶属于自身的所有协程子任务均完成复制操作后向所述副本组管理模块上报所述重建完成信号。
4.根据权利1至3任一项所述的数据重建方法,其特征在于,在所述副本组管理模块根据所述重建完成信号使用所述目标替换磁盘更新所述待重建文件列表中各数据文件的路由信息之后,还包括:
所述文件系统回收返回了所述重建完成信号的数据重建协程所占用的系统资源。
5.根据权利要求4所述的数据重建方法,其特征在于,在所述数据重建协程将所述数据重建源复制至所述目标替换磁盘之前,还包括:
所述文件系统在所述目标替换磁盘上创建所述数据重建源的目录项,并将所述目录项的状态属性设置为故障状态,直至所述数据重建源被完全复制至所述目标替换磁盘才将所述状态属性修改为可用状态。
6.一种数据重建系统,其特征在于,应用于新GlusterFS,包括:
故障磁盘及重建信息确定单元,用于任务中心通过与各磁盘之间的心跳连接确定存在的故障磁盘,并根据所述故障磁盘的文件分布信息确定待重建文件列表,且计算得到目标替换磁盘;
数据重建任务下发单元,用于所述任务中心将包含有所述待重建文件列表和所述目标替换磁盘的数据重建任务下发至文件系统;
数据重建协程创建单元,用以所述文件系统为接收到的数据重建任务创建一个数据重建协程;
可用数据重建源存在判定单元,用于所述数据重建协程判断是否存在与所述待重建文件列表对应的可用的数据重建源;
数据重建单元,用于当存在与所述待重建文件列表对应的可用的数据重建源时,所述数据重建协程将所述数据重建源复制至所述目标替换磁盘,并在复制完成后,向副本组管理模块上报重建完成信号;
路由信息更新单元,用于所述副本组管理模块根据所述重建完成信号使用所述目标替换磁盘更新所述待重建文件列表中各数据文件的路由信息。
7.根据权利要求6所述的数据重建系统,其特征在于,所述数据重建协程创建单元包括:
协程批量创建子单元,用于当所述任务中心在同一时刻批量下发多个数据重建任务时,所述文件系统为接收到的每个数据重建任务分别创建一个数据重建协程。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深信服科技股份有限公司,未经深信服科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811215841.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置