[发明专利]一种数据同步方法、系统、装置、设备及介质

权利要求书

1.一种数据同步方法，其特征在于，包括：

对源数据库进行监听，形成监听日志，监听日志中包括至少一个同步数据项，每个同步数据项中包括操作数据，以及与操作数据匹配的操作类型；

根据所述监听日志，形成与各同步数据项分别对应的数据同步请求；

在备选代理服务器集群中，确定目标代理服务器；

将各所述数据同步请求发送至目标代理服务器，以指示所述目标代理服务器依据负载策略针对各所述目标数据库执行各所述数据同步请求。

2.根据权利要求1所述的方法，其特征在于，对源数据库进行监听，形成监听日志，包括：

每当监听到所述源数据库中生成新的日志文件时，根据所述日志文件的文件大小，从所述源数据库中分片获取所述日志文件中包括的各所述操作数据项；

将各所述操作数据项作为所述同步数据项，存储于所述监听日志中。

3.根据权利要求1所述的方法，其特征在于，根据所述监听日志，形成与各同步数据项分别对应的数据同步请求，包括：

获取与当前处理的目标同步数据项对应的目标操作数据以及目标操作类型，并根据所述目标操作类型，确定数据读写类型；

构建与所述数据读写类型匹配的目标数据同步请求，并将所述目标操作数据以及目标操作类型加入至所述目标数据同步请求中。

4.根据权利要求1所述的方法，其特征在于，在备选代理服务器集群中，确定目标代理服务器，包括：

在备选代理服务器集群中，获取当前标识为主机的代理服务器，作为所述目标代理服务器；

其中，所述备选代理服务器集群中包括主机和至少一个备机，所述主机在发生故障时，触发主备切换，所述主机在正常运行时，实时监控各备机运行状态，以保证至少一个备机与所述主机保持同步正常运行。

5.根据权利要求2所述的方法，其特征在于，在每当监听到所述源数据库中生成新的日志文件时，根据所述日志文件的文件大小，从所述源数据库中分片获取所述日志文件中包括的各所述操作数据项之后，还包括：

保存当前分片的偏移量作为目标偏移量，当存在断点问题时，依据所述目标偏移量从所述源数据库中接续分片获取所述日志文件中包括的各所述操作数据项。

6.一种数据同步系统，其特征在于，包括多个数据库、数据同步服务器、备选代理服务器集群，其中：

所述数据库，包括用于进行本机数据更新的源数据库，以及对源数据库中的数据更新操作进行数据同步的目标数据库；

所述数据同步服务器，用于执行如权利要求1-5中任一项所述的方法；

所述备选代理服务器集群中的目标代理服务器，用于接收所述数据同步服务器发送的所述数据同步请求，并依据负载策略针对各所述目标数据库执行各所述数据同步请求。

7.根据权利要求6所述的系统，其特征在于，所述目标代理服务器具体用于：

依据所述数据同步请求，获取各个操作数据、与各个操作数据匹配的操作类型以及操作类型的数据读写类型；

若目标操作数据匹配的当前操作类型为数据读类型，且目标操作数据匹配的前序操作类型为数据读类型，则依据负载策略针对各所述目标数据库并行执行当前操作与前序操作对应的数据同步请求；

若目标操作数据匹配的当前操作类型为数据写类型，则依据负载策略针对各所述目标数据库排队执行当前操作对应的数据同步请求。

8.一种数据传输装置，其特征在于，包括：

日志监听模块，用于对源数据库进行监听，形成监听日志，监听日志中包括至少一个同步数据项，每个同步数据项中包括操作数据，以及与操作数据匹配的操作类型；

请求生成模块，用于根据所述监听日志，形成与各同步数据项分别对应的数据同步请求；

代理服务器确定模块，用于在备选代理服务器集群中，确定目标代理服务器；

数据传输模块，用于将各所述数据同步请求发送至目标代理服务器，以指示所述目标代理服务器依据负载策略针对各所述目标数据库执行各所述数据同步请求。