[发明专利]共享存储集群的主备流复制方法、装置、电子设备和介质

说明书

本公开涉及一种共享存储集群的主备流复制方法、装置、电子设备和介质，其中，方法包括：集群中所有节点划分为主子集群和备子集群，主子集群和备子集群均对客户端提供服务，主子集群接收客户端发送的读写请求，基于读写请求进行内容修改并生成日志，主子集群将日志发送给备子集群，备子集群接收到日志，对日志进行分析处理确定目标修改内容，并基于目标修改内容对备子集群的共享存储中的数据进行与主子集群相同的修改。由此，将集群所有节点划为两个子集群，两个子集群间使用主备流复制的方式进行同步，以使两个集群间保持数据一致性。

技术领域

本公开涉及分布式数据库技术领域，尤其涉及一种共享存储集群的主备流复制方法、装置、电子设备和介质。

背景技术

通常，分布式数据库系统有很多种不同的物理架构，比如读写分离集群，共享存储集群，分片式分布式集群，存储计算分离集群等，不同的物理架构分别有着各自的优势和劣势。

其中，读写分离集群是指若干个无共享设备的数据库实例依靠网络相互连接，并通过物理日志的流复制技术保持每个实例之间数据的一致性；整个集群中只有一个节点可以产生物理日志，而其他节点则只能被动的接受日志并进行应用，因此整个集群只有一个读写节点，而其他节点均只能提供读服务；读写分离集群通常会配合负载均衡中间件以自动分发读或写请求到合适的节点上，以保证事务能被正确执行的同时均衡每个节点的负载。

然而，读写分离集群虽然可以在只读业务占绝大多数的场景种平衡负载，但是却不能平衡大量写场景下的负载。

发明内容

为了解决上述技术问题，本公开提供了一种共享存储集群的主备流复制方法、装置、电子设备和介质。

本公开提供了一种共享存储集群的主备流复制方法，集群中所有节点划分为主子集群和备子集群，所述主子集群和所述备子集群均对客户端提供服务，包括：

所述主子集群接收所述客户端发送的读写请求，基于所述读写请求进行内容修改并生成日志；

所述主子集群将所述日志发送给所述备子集群；

所述备子集群接收到所述日志，对所述日志进行分析处理确定目标修改内容，并基于所述目标修改内容对所述备子集群的共享存储中的数据进行与所述主子集群相同的修改。

在本公开的一个实施例中，所述主子集群将所述日志发送给所述备子集群，包括：

通过所述主子集群中每个节点上的一至多个日志发送进程读取本节点的日志并发送给所述备子集群节点。

在本公开的一个实施例中，所述备子集群接收到所述日志，包括：

所述备子集群中的每个节点上的一至多个日志接收进程接收所述主子集群发送的所述日志。

在本公开的一个实施例中，所述集群中每个节点的发送进程的数量和接收进程的数量相同。

在本公开的一个实施例中，所述主子集群中每个发送进程连接到所述备子集群上所有节点上相同编号的接收进程。

在本公开的一个实施例中，所述对所述日志进行分析处理确定目标修改内容，包括：

通过所述备子集群中的每个节点上的一至多个日志应用进程读取接收进程收到的日志，并对所述日志进行分析处理确定目标修改内容。

在本公开的一个实施例中，所述主子集群接收所述客户端发送的读写请求之后，还包括：

生成后台会话进程；

所述基于所述读写请求进行内容修改并生成日志，包括：

所述后台会话进程记录当前日志后，基于所述读写请求确定内容，并对内容进行修改生成所述日志。