[发明专利]状态机复制方法、装置、系统及存储介质

说明书

本申请公开了状态机复制方法、装置、系统及存储介质，涉及云计算技术领域。具体实现方案为：节点通过包括的日志服务模块确定该节点在该状态机复制系统中的角色，主节点通过包括的DFS客户端将生成的日志文件写入到分布式文件系统中的至少一个存储节点中，从节点通过包括的DFS客户端从分布式文件系统的至少一个存储节点中读取日志文件。该技术方案，基于分布式文件系统实现日志文件的读写，而且同一个日志流不需要限定在固定的机器上，提高了系统的容错能力，提高了状态机复制系统的高可用性。

技术领域

本申请涉及计算机技术领域，尤其涉及一种云计算技术领域中的状态机复制方法、装置、系统及存储介质。

背景技术

在单机系统中，系统进行变更操作前，可以先持久化记录的日志，再将其应用到状态机，这样在系统宕机后，通过重做日志可以将系统恢复到原有的状态。尤其在分布式系统中，通过状态机复制(state machine replication)技术，能够实现分布式系统的高可用性和一致性。

现有技术中，Paxos是分布式系统中最基础的一致性协议，基于该Paxos进行变形和衍生的分布式状态机复制技术(例如，QJM和RAFT)可以实现多个节点的日志同步，从而保证了有状态服务的高可用和一致性。

然而，现有的分布式状态机复制技术一般要求同一个日志流在同一时间限定在固定的机器上，这导致单个日志流的性能和空间只能受限于单台机器，容错能力差，无法保证系统的高可用性。

发明内容

本申请实施例提供一种状态机复制方法、装置、系统及存储介质，用于解决现有的分布式状态机复制技术存在的系统容错能力差、系统可用性低的问题。

第一方面，本申请提供一种状态机复制方法，应用于状态机复制系统中的任意一个节点，所述节点包括：日志服务模块和分布式文件系统DFS客户端，所述方法包括：

所述节点通过所述日志服务模块确定所述节点在所述状态机复制系统中的角色，所述角色为主节点或从节点，所述主节点为所述状态机复制系统的服务节点，所述从节点为所述状态机复制系统的备用节点；

在所述节点为主节点时，所述节点通过所述DFS客户端将生成的日志文件写入到分布式文件系统中的至少一个存储节点中；

在所述节点为从节点时，所述节点通过所述DFS客户端从分布式文件系统的至少一个存储节点中读取日志文件。

在本实施例中，基于分布式文件系统实现日志文件的读写，同一个日志流不需要限定在固定的机器上，提高了系统的容错能力，提高了状态机复制系统的高可用性。

在第一方面的一种可能设计中，所述节点通过所述DFS客户端将生成的日志文件写入到分布式文件系统中的至少一个存储节点中，包括：

所述节点通过所述DFS客户端将所述日志文件以流文件块的形式写入到所述分布式文件系统中至少一个存储节点中，每个流文件块具有预设的最大块容量。

在本实施例中，分布式文件系统可以支持变长的流文件的存储，这样用于存储日志文件的文件块不需要限制在固定的机器上，日志文件可以无限增长，从而实现了更好的负载均衡。

可选的，若所述节点为主节点，所述方法还包括：

所述节点通过所述DFS客户端确定正在写入的源存储节点出现异常时，基于封闭机制，封闭所述源存储节点；

所述节点通过所述DFS客户端与所述分布式文件系统的管理节点进行交互，确定待写入的目标存储节点；

所述节点将待写入所述源存储节点的日志文件写入到所述分布式文件系统中的所述目标存储节点中。