[发明专利]一种K-DB数据库多节点集群调度的方法、系统、设备及介质

说明书

本发明公开了一种K‑DB数据库多节点集群调度的方法、系统、设备和存储介质，方法包括：将应用终端和调度器通过业务外网连接K‑DB数据库集群，将数据库集群之间通过内网进行互联；响应于调度器接收到应用请求，判断请求是否为表查询，响应于请求为表查询，判断请求是否为多表联合查询；响应于请求为多表联合查询，确定请求中待查询的表，并确定每个表版本最高的节点；根据每个表最近一次更新操作的类型确定变化值的类型，并根据变化值的类型计算表更新的数据量；以及从每个表版本最高的节点中选择更新的数据量最小的节点作为计算节点，将其他节点的表同步至计算节点，并基于计算节点执行多表联合查询。本发明通过将数据和计算调度分离，减轻节点压力。

技术领域

本发明涉及数据库领域，更具体地，特别是指一种K-DB数据库多节点集群调度的方法、系统、计算机设备及可读介质。

背景技术

当前主流的数据库系统架构有完全共享、共享存储、完全不共享等几种。其中完全共享体系如SMP服务器，局限于单节点服务器，通常价格比较昂贵，其扩展性和性能受到相应的限制。共享存储体系允许系统带有多个服务器实例，这些实例与共享存储设备相连。这种体系可实现多机并行，保证系统的高可用性，但需要通过一个数据管道将所有I/O信息过滤到共享存储子系统，对硬件的要求较高，且并非高性能解决方案。

与此相比，基于硬件的数据仓库平台一般采用完全无共享体系。在这种体系下，通讯功能部署在一个高宽带网络互连体系上，用户通过一个主控制节点执行并行查询。该体系的一个重要优势就是每个节点都有一个通往本地磁盘的独立通道，不但简化了体系，还提供良好的扩展性。但是，现有技术中的完全无共享体系无法将数据和计算调度分离，节点的压力比较大。

发明内容

有鉴于此，本发明实施例的目的在于提出一种K-DB数据库多节点集群调度的方法、系统、计算机设备及计算机可读存储介质，通过在上层使用调度器进行应用请求分发和数据调度，在底层数据库集群采用完全对等无共享体系架构，使得各个节点完全对等，从而将数据和计算调度分离，减轻节点压力。

基于上述目的，本发明实施例的一方面提供了一种K-DB数据库多节点集群调度的方法，包括如下步骤：将应用终端和调度器通过业务外网连接K-DB数据库集群，将数据库集群之间通过内网进行互联；响应于所述调度器接收到应用请求，判断所述请求是否为表查询，响应于所述请求为表查询，判断所述请求是否为多表联合查询；响应于所述请求为多表联合查询，确定所述请求中待查询的表，并确定每个表版本最高的节点；根据每个表最近一次更新操作的类型确定变化值的类型，并根据所述变化值的类型计算所述表更新的数据量；以及从所述每个表版本最高的节点中选择更新的数据量最小的节点作为计算节点，将其他节点的表同步至所述计算节点，并基于所述计算节点执行所述多表联合查询。

在一些实施方式中，方法还包括：响应于所述请求为单表查询，选择所述表版本最高的一个或多个节点转发所述请求。

在一些实施方式中，方法还包括：响应于单表查询期间接收到表更新请求，在没有所述表查询任务的节点中选择所述表版本最高的节点进行更新。

在一些实施方式中，方法还包括：响应于所述请求为表更新，判断所述表版本最高的节点是否唯一；以及响应于所述表版本最高的节点唯一，选择所述节点转发所述请求。

在一些实施方式中，方法还包括：响应于所述表版本最高的节点不唯一，判断所述表版本最高的节点中状态值最低的节点是否唯一；以及响应于所述表版本最高的节点中状态值最低的节点唯一，在所述节点对所述表进行更新。

在一些实施方式中，方法还包括：响应于所述表版本最高的节点中状态值最低的节点不唯一，随机从所述状态值最低的节点中选择一个节点对所述表进行更新，并锁定其他节点的所述表。

在一些实施方式中，方法还包括：响应于所述表更新完成，将所述节点的所述表的版本号加一，并解除所述其他节点的所述表的锁定。