[发明专利]分布式存储系统的磁盘故障处理方法、装置及服务器有效
申请号: | 202210298450.8 | 申请日: | 2022-03-25 |
公开(公告)号: | CN114415970B | 公开(公告)日: | 2022-06-17 |
发明(设计)人: | 甘红星 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/07 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 董艳芳 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 存储系统 磁盘 故障 处理 方法 装置 服务器 | ||
本发明提供了一种分布式存储系统的磁盘故障处理方法、装置及服务器,涉及计算机的技术领域,包括:当检测到触发数据块异常事件时,向管理节点发送数据块异常事件对应的第一移除命令,以移除管理节点内存储的故障数据块对应的数据块信息;接收管理节点发送的第二移除命令;移除数据节点内存储的故障数据块对应的数据块信息,并基于故障数据块对应的存储副本屏蔽故障数据块。本发明可以显著降低数据块故障的影响范围,降低了磁盘故障的处理力度,而且有效降低了数据恢复操作和数据均衡操作的频率。
技术领域
本发明涉及计算机技术领域,尤其是涉及一种分布式存储系统的磁盘故障处理方法、装置及服务器。
背景技术
分布式存储系统是一种通过将数据分散存储在多台独立的设备上,从而缓冲本地数据,进而降低网络压力的系统。目前,相关技术提出,可以通过部署运维工具检测分布式存储系统中的磁盘异常信息(诸如,磁盘存在坏块等),当捕捉到磁盘异常信息时,运维工具将对磁盘进行下盘处理,对于因坏块引发的下盘处理将导致整个磁盘存储的数据失效,从而引发大量数据恢复操作,而且下盘处理后的磁盘相当于空磁盘,若分布式存储系统内其他磁盘内存有数据,将对分布式存储系统的均衡性造成不利影响。
发明内容
有鉴于此,本发明的目的在于提供一种分布式存储系统的磁盘故障处理方法、装置及服务器,可以显著降低数据块故障的影响范围,降低了磁盘故障的处理力度,而且有效降低了数据恢复操作和数据均衡操作的频率。
第一方面,本发明实施例提供了一种分布式存储系统的磁盘故障处理方法,方法应用于分布式存储系统的数据节点,数据节点配置有至少一个磁盘,每个磁盘均包括至少一个数据块,分布式存储系统还包括管理节点,方法包括:当检测到触发数据块异常事件时,向管理节点发送数据块异常事件对应的第一移除命令,以移除管理节点内存储的故障数据块对应的数据块信息;其中,第一移除命令携带有故障数据块的数据块标识;接收管理节点发送的第二移除命令;移除数据节点内存储的故障数据块对应的数据块信息,并基于故障数据块对应的存储副本屏蔽故障数据块;其中,存储副本存储在故障数据块所属磁盘中。
在一种实施方式中,基于故障数据块对应的存储副本屏蔽故障数据块的步骤,包括:对故障数据块的存储副本执行重命名操作得到重命名副本,并将重命名副本存储至指定路径;其中,指定路径设置于故障数据块所属磁盘。
在一种实施方式中,在将重命名副本存储至指定路径的步骤之后,方法包括:统计指定路径中存储的重命名副本的副本数量;判断副本数量是否大于预设数量阈值;如果是,将故障数据块所属磁盘确定为故障磁盘,并屏蔽故障磁盘。
在一种实施方式中,屏蔽故障磁盘的步骤,包括:向管理节点发送磁盘异常事件对应的第三移除命令,以移除管理节点内存储的故障磁盘对应的磁盘信息;其中,第三移除命令携带有故障磁盘的磁盘标识;接收管理节点发送的第四移除命令;移除数据节点内存储的故障磁盘对应的磁盘信息。
在一种实施方式中,在当检测到触发数据块异常事件时,向管理节点发送数据块异常事件对应的第一移除命令的步骤之前,方法还包括:如果监听到针对于数据块的指定操作,生成第一校验码;判断第一校验码与数据块对应的第二校验码是否一致;如果否,将数据块确定为故障数据块,并触发数据块异常事件。
在一种实施方式中,在基于故障数据块对应的存储副本屏蔽故障数据块的步骤之后,方法还包括:生成故障数据块对应的第一屏蔽结果,并将第一屏蔽结果发送至管理节点,以使管理节点针对故障数据块执行恢复操作。
在一种实施方式中,在移除数据节点内存储的故障磁盘对应的磁盘信息的步骤之后,方法包括:生成故障磁盘对应的第二屏蔽结果,并将第二屏蔽结果发送至管理节点,以使管理节点针对故障磁盘执行恢复操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210298450.8/2.html,转载请声明来源钻瓜专利网。