[发明专利]数据同步的系统、方法、装置和计算机存储介质

摘要

本发明实施例提供给了一种数据同步系统、方法、装置和计算机存储介质。所述系统包括数据监听模块、消息分发模块、数据同步模块、以及配置管理模块；数据监听模块，用于对数据源进行监听以获取数据源的数据变更记录；消息分发模块，用于创建与数据源对应的消息队列，将数据变更记录加入到消息队列中；配置管理模块，用于管理数据源的同步配置参数；数据同步模块，用于获取同步配置参数，按照同步配置参数创建消费协程；由消费协程监听消息队列，按照同步配置参数将数据变更记录更新到目标存储中。

主权项

1.一种数据同步系统，其特征在于，所述系统包括数据监听模块、消息分发模块、数据同步模块、以及配置管理模块；所述数据监听模块，用于对数据源进行监听，以获取所述数据源的数据变更记录；所述消息分发模块，用于创建与所述数据源对应的消息队列，从所述数据监听模块获取所述数据源的数据变更记录并将所述数据源的数据变更记录加入到与所述数据源对应的消息队列中；所述配置管理模块，用于管理所述数据源的同步配置参数，所述数据源的同步配置参数包括所述数据源的标识、目标存储的位置、以及与所述数据源对应的消息队列的标识；所述数据同步模块，用于监听所述配置管理模块以获取所述数据源的同步配置参数，按照所述数据源的同步配置参数创建与所述消息队列对应的消费协程；以及，由所述消费协程监听对应的所述消息队列，以消费对应的所述消息队列中写入的数据变更记录，按照所述数据源的同步配置参数将所述消息队列中写入的数据变更记录更新到对应的目标存储中。