[发明专利]一种分布式存储系统的故障恢复方法、系统及相关组件

说明书

本申请公开了一种分布式存储系统的故障恢复方法，所述故障恢复方法包括当检测到节点故障信息时，利用所述主节点对集群内所有正常节点进行集群IP地址重分配操作为每一个所述正常节点分配一一对应的虚拟IP地址；查询所述集群内的客户端信息表，并根据查询结果将连接有客户端的所述虚拟IP地址对应的正常节点设置为目标节点；控制每一所述目标节点向对应的客户端发送TCP重连信号，以便恢复业务连接。本方法能够可以在业务节点出现故障后快速实现故障恢复，提高分布式存储系统的稳定性。本申请还公开了一种分布式存储系统的故障恢复系统、一种计算机可读存储介质及一种电子设备，具有以上有益效果。

技术领域

本发明涉及数据存储技术领域，特别涉及一种分布式存储系统的故障恢复方法、系统、一种计算机可读存储介质及一种电子设备。

背景技术

分布式存储系统，是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性的焦点，不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。

CTDB是一个集群TDB数据库，可以被Samba或者其他的应用使用来存储数据。CTDB有一套虚拟IP机制，可以让集群在某个节点故障后，业务IP从一个节点飘到另外一个节点，业务可自动恢复。

在现有技术中，客户端与集群的连接中断后，再次连接耗费的时间较长，原因是TCP连接的重连的超时时间算法是指数退避算法，即如果对端IP连接不上，会尝试重连，但是重连的间隔会越来越长，时间依次是1s、3s、6s、12s、24s、48s、64s、64s。这样，如果在客户端在某时刻A发送一次重连信号，但是集群虚拟IP还未漂移完成，则客户端在A+24s时刻才会再次发送重连信号，而如果集群在A+5s时刻已经漂移完了IP，但是仍然需要等待24s-5s＝19s的时间，导致整个业务中断时间较长。

因此，如何在业务节点出现故障后快速实现故障恢复，提高分布式存储系统的稳定性是本领域技术人员目前需要解决的技术问题。

发明内容

本申请的目的是提供一种分布式存储系统的故障恢复方法、系统、一种计算机可读存储介质及一种电子设备，能够在业务节点出现故障后快速实现故障恢复，提高分布式存储系统的稳定性。

为解决上述技术问题，本申请提供一种分布式存储系统的故障恢复方法，该故障恢复方法包括：

当检测到节点故障信息时，利用所述主节点对集群内所有正常节点进行集群IP地址重分配操作为每一个所述正常节点分配一一对应的虚拟IP地址；

查询所述集群内的客户端信息表，并根据查询结果将连接有客户端的所述虚拟IP地址对应的正常节点设置为目标节点；

控制每一所述目标节点向对应的客户端发送TCP重连信号，以便恢复业务连接。

可选的，在利用所述主节点对集群内所有正常节点进行集群IP地址重分配操作之前，还包括：

根据所述节点故障信息确定故障节点，并判断所述故障节点是否为主节点；

若是，则从所有所述正常节点中重新选举所述主节点。

可选的，在将连接有客户端的所述虚拟IP地址对应的正常节点设置为目标节点之后，还包括：

控制所有所述目标节点向集群内的所有所述正常节点发送ARP广播，以使所有所述正常节点更新ARP表；其中，所述ARP表存储有虚拟IP地址与MAC地址的对应关系。

可选的，还包括：

当接收到信息发送指令时，根据所述信息发送指令确定目标虚拟IP地址；