[发明专利]一种数据同步方法、装置和设备

说明书

本发明公开了一种数据同步方法、装置和设备，所述方法包括：获取用于提供同步服务的配置文件；针对除中心库以外的任一待同步数据库，根据该待同步数据库中需要同步的数据库表的标识信息，确定该待同步数据库中需要同步的数据库表；根据该待同步数据库对应的已同步时间戳，从确定出的需要同步的数据库表中提取写入时间晚于已同步时间戳、同步状态字段表征未同步的数据，其中，每一待同步的数据库包含的各个数据库表中包含时间戳字段和同步状态字段；将各个待同步数据库中提取出的数据同步到中心库中。采用上述方法，通过在数据库中增加时间戳字段和同步状态字段，无需考虑数据库的类型或版本，即可实现跨类型、跨版本的数据库之间的数据同步。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种数据同步方法、装置和设备。

背景技术

现有技术中普遍采用的数据库中数据同步方法，一般是基于数据库本身同步技术实现数据的同步，例如对两台数据库之间的数据实现同步时，一般在同一空间内用一根数据线将分别承载这两个数据库的设备相连，即进行双机热备，由此实现这两个数据库中数据的同步。

现有的数据同步方法一般只适用于类型相同、版本相同的数据库之间的数据同步，可以得出现有的数据库的数据同步方法对数据库本身属性有较高要求，无法实现不同类型的数据库之间的数据同步。

因此，如何实现跨类型、跨版本的数据库之间的数据同步是亟待解决的技术问题之一。

发明内容

本发明实施例提供一种数据同步方法、装置和设备，用以实现不同数据库类型和/或版本的数据库之间的数据同步。

第一方面，本发明实施例提供一种数据同步方法，包括：

获取用于提供同步服务的配置文件，所述配置文件中包含预先选定的中心库的属性信息、各个待同步数据库中需要同步的数据库表的标识信息和各个待同步数据库对应的已同步时间戳，其中所述中心库为从所有待同步数据库中选择出来的；

针对除所述中心库以外的任一待同步数据库，根据该待同步数据库中需要同步的数据库表的标识信息，确定该待同步数据库中需要同步的数据库表；并

根据该待同步数据库对应的已同步时间戳，从确定出的需要同步的数据库表中提取写入时间晚于所述已同步时间戳、同步状态字段表征未同步的数据，其中，每一待同步的数据库包含的各个数据库表中包含时间戳字段和同步状态字段，所述时间戳字段用于表征数据库表中每条数据的写入时间，所述同步状态字段用于表征数据库表中每条数据是否已同步；

将各个待同步数据库中提取出的数据同步到所述预先选定的中心库的属性信息对应的中心库中。

较佳地，所述方法，还包括：

根据所述中心库中需要同步的数据库表的标识信息，确定所述中心库中需要同步的数据库表；并

根据所述中心库对应的已同步时间戳，从确定出的需要同步的数据库表中提取写入时间晚于所述已同步时间戳、同步状态字段表征未同步的数据；

将所述数据同步到除所述中心库以外的其它待同步数据库中。

优选地，所述配置文件中还包含单次同步设置的同步数据条数；以及从确定出的需要同步的数据库表中提取写入时间晚于所述已同步时间戳、同步状态字段表征未同步的数据，具体包括：

从确定出的需要同步的数据库表中，确定写入时间晚于所述已同步时间戳、同步状态字段表征未同步且不超过所述同步数据条数的数据。

进一步地，所述配置文件中还所述单次同步设置的同步批次；以及按照以下方法将数据同步到需要同步的数据库中，所述需要同步的数据库为中心库或所述其它待同步数据库：

将数据按照写入时间由先到后的顺序进行排序，得到排序后的数据；并