[发明专利]数据同步方法和系统、计算机可读存储介质

权利要求书

1.一种数据同步方法，其特征在于，应用于数据同步系统，包括：

从源数据库获取初始源数据；

生成所述初始源数据的指纹数据得到包含所述指纹数据的目标源数据；所述指纹数据作为所述初始源数据的主键；

将所述目标源数据同步到目标数据库，以使所述目标数据库在所述主键校验通过后存储所述目标源数据。

2.根据权利要求1所述的方法，其特征在于，生成所述初始源数据的指纹数据，包括：

调用预设的指纹生成模型；

将所述初始源数据作为所述指纹生成模型的输入数据输入到所述指纹生成模型，得到所述指纹数据。

3.根据权利要求2所述的方法，其特征在于，所述预设的指纹生成模型采用消息摘要算法、安全散列算法、消息认证码算法和基于密钥的消息认证码算法中的至少一种实现。

4.根据权利要求1所述的方法，其特征在于，将所述目标源数据同步到目标数据库，包括：

基于所述目标源数据中的初始源数据生成校验指纹数据；

当所述目标源数据中的主键与所述校验指纹数据相同时，将所述目标源数据发送到目标数据库。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

所述目标数据库获取所述目标源数据中的主键并匹配已存储数据的主键；

当所述目标数据库中存在所述目标源数据的主键时，将所述目标源数据更新到所述目标数据库；

当所述目标数据库中不存在所述目标源数据的主键时，将所述目标源数据插入到所述目标数据库。

6.根据权利要求1所述的方法，其特征在于，将所述目标源数据同步到目标数据库，包括：

获取除新增数据列之外的数据列的第一指纹数据和包含新增数据列的数据列的第二指纹数据；

匹配所述第一指纹数据和所述目标数据库的主键；

当所述目标数据库中存在所述目标源数据的主键时，将所述目标源数据和所述第二指纹数据更新到所述目标数据库。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取历史任务信息；

统计所述历史任务信息中所使用的目标源数据中的列组合；

根据所述列组合的列数据生成指纹数据，将所述指纹数据作为所述目标源数据的副键同步存储到所述目标数据库中。

8.一种数据同步系统，其特征在于，包括源数据库、目标数据库和数据同步装置；

所述数据同步装置用于从所述源数据库获取初始源数据并生成所述初始源数据的指纹数据，得到包含所述指纹数据的目标源数据；所述指纹数据作为所述初始源数据的主键；以及将所述目标源数据同步到目标数据库，以使所述目标数据库在所述主键校验通过后存储所述目标源数据。

9.根据权利要求8所述的系统，其特征在于，所述数据同步装置包括Framework模块、指纹数据生成模块、读取插件和写入插件；所述Framework模块分别与所述读取插件和所述写入插件连接，

所述读取插件，用于从源数据库读取待同步的初始源数据；

所述指纹数据生成模块，用于生成所述初始源数据的指纹数据并将所述指纹数据作为所述初始源数据的主键；

所述Framework模块，用于将所述初始源数据和所述主键作为目标源数据转发给所述写入插件；

所述写入插件，用于将所述目标源数据写入到目标数据库。

10.根据权利要求9所述的系统，其特征在于，所述指纹数据生成模块集成到所述读取插件和/或Framework模块。

11.根据权利要求9所述的系统，其特征在于，所述指纹数据生成模块集成到所述写入插件内，用于基于所述目标源数据中的初始源数据生成校验指纹数据；所述写入插件还用于对比所述目标源数据中的主键与所述校验指纹数据，并在所述主键与所述校验指纹数据相同时，将所述目标源数据发送到目标数据库。