[发明专利]数据分布式存储方法、装置、电子设备及存储介质

说明书

本发明实施例提供了一种数据分布式存储方法、装置、电子设备及存储介质，所述方法包括：获取数据库建库条件，根据数据库建库条件执行相应数据库建库指令，建立多个主数据库以及与每个主数据库对应的多个备数据库；从主数据库中确定待建立数据库表的目标主数据库，以及从备数据库中确定与目标主数据库对应的目标备数据库；获取数据库表建表条件，根据数据库表建表条件执行相应数据库表建表指令，在目标主数据库以及目标备数据库中分别建立数据库表；获取待存储数据，将待存储数据存储至目标主数据库中的数据库表上；基于预设数据一致性算法将目标主数据库中的数据库表上存储的待存储数据同步至目标备数据库中的数据库表上。

技术领域

本发明涉及数据存储技术领域，尤其涉及一种数据分布式存储方法、装置、电子设备及存储介质。

背景技术

目前，数据库已经成为社会信息化发展的载体，国产数据库蓬勃发展，数据库商业化日益成熟，在此背景下，各个互联网巨头纷纷基于业务特点和行业需求开始自研分布式国产数据库。其中一关键技术便是数据库底层如何实现数据分布式存储，以达到数据均匀分布到多个存储单元上，且能够实现快速的数据库读写请求。

相关技术中，以oceanbase与tidb为代表的，基于google的bigtable论文的理论基础实现的分布式结构化数据存储，在国产数据库开发设计中，使用bigtable论文的理论基础实现稀疏的、分布式的、持久化存储，同时bigtable论文的理论是建立在GFS之上的，具有很高的技术门槛，实现复杂且周期很长。

发明内容

本发明实施例的目的在于提供一种数据分布式存储方法、装置、电子设备及存储介质，以实现降低数据分布式存储的复杂度及周期的有益效果。

具体技术方案如下：

在本发明实施例的第一方面，首先提供了一种数据分布式存储方法，所述方法包括：

获取数据库建库条件，根据所述数据库建库条件执行相应数据库建库指令，建立多个主数据库以及与每个主数据库对应的多个备数据库；

从所述主数据库中确定待建立数据库表的目标主数据库，以及从所述备数据库中确定与所述目标主数据库对应的目标备数据库；

获取数据库表建表条件，根据所述数据库表建表条件执行相应数据库表建表指令，在所述目标主数据库以及所述目标备数据库中分别建立数据库表；

获取待存储数据，将所述待存储数据存储至所述目标主数据库中的所述数据库表上；

基于预设数据一致性算法将所述目标主数据库中的所述数据库表上存储的所述待存储数据同步至所述目标备数据库中的所述数据库表上。

在一个可选的实施方式中，所述获取数据库表建表条件，根据所述数据库表建表条件执行相应数据库表建表指令，在所述目标主数据库以及所述目标备数据库中分别建立数据库表，包括：

获取数据库表建表条件，其中，所述数据库表建表条件包括业务逻辑拆分规则以及选择的主键类型；

根据所述业务逻辑拆分规则确定数据库表类型，执行与所述数据库表类型对应的数据库表建表指令；

在所述目标主数据库以及所述目标备数据库分别建立与所述主键类型对应的数据库表。

在一个可选的实施方式中，所述将所述待存储数据存储至所述目标主数据库中的所述数据库表上之前，所述方法还包括：

判断所述目标主数据库中的所述数据库表上已存储数据对应的数量是否小于预设阈值；

若所述目标主数据库中的所述数据库表上已存储数据对应的数量小于预设阈值，则执行所述将所述待存储数据存储至所述目标主数据库中的所述数据库表上的步骤。

在一个可选的实施方式中，所述方法还包括：