[发明专利]数据的同步方法及装置、存储介质及电子装置

说明书

本发明提供了一种数据的同步方法及装置、存储介质及电子装置，其中，该方法包括：在预定消息系统中查询预定主题topic的最新更新记录，其中，所述预定topic用于记录源表中的数据；基于所述最新更新记录筛选所述源表中的增量数据，将增量数据写入所述预定topic中，以得到目标topic；将所述目标topic中记录的所述增量数据同步到目标表中。通过本发明，解决了相关技术中存在的数据同步时需要多次读取源表中的数据，对源表造成压力的问题，进而达到了减轻源表的压力，提高数据同步效率的目的。

技术领域

本发明涉及通信领域，具体而言，涉及一种数据的同步方法及装置、存储介质及电子装置。

背景技术

在相关技术中，将同一个源表中的数据同步到多个目标表中，需要多次读取源表中的数据，从而对源表造成一定的压力。例如，在进行增量数据抽取时，需要创建临时表或快照表用于记录当次抽取的标记位。在进行多表到单表的增量数据同步时，每次抽取都要为每张源表创建标记位记录，因此，需要多次读取源表中的数据，并且会占用较大存储资源。当存在多张源数据表时，目标数据表中数据条目编号的最大值可能来源于其他源数据表，导致增量数据同步异常，进而对源表造成一定的压力。

由此可知，相关技术中存在数据同步时需要多次读取源表中的数据，对源表造成压力的问题。

针对相关技术中存在的上述问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据的同步方法及装置、存储介质及电子装置，以至少解决相关技术中存在的数据同步时需要多次读取源表中的数据，对源表造成压力的问题。

根据本发明的一个实施例，提供了一种数据的同步方法，包括：在预定消息系统中查询预定主题topic的最新更新记录，其中，所述预定topic用于记录源表中的数据；基于所述最新更新记录筛选所述源表中的增量数据，将增量数据写入所述预定topic中，以得到目标topic；将所述目标topic中记录的所述增量数据同步到目标表中。

根据本发明的另一个实施例，提供了一种数据的同步装置，包括：查询模块，用于在预定消息系统中查询预定主题topic的最新更新记录，其中，所述预定topic用于记录源表中的数据；处理模块，用于基于所述最新更新记录筛选所述源表中的增量数据，将增量数据写入所述预定topic中，以得到目标topic；同步模块，用于将所述目标topic中记录的所述增量数据同步到目标表中。

根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。

通过本发明，在预定消息系统中查询预定topic的最新更新记录，根据最新更新记录筛选源表中的增量数据，将增量数据写入预定topic中得到目标topic，再将目标topic中的增量数据同步到目标表中，由此可知，在进行数据同步时，是利用了预定消息系统来实现源表和目标表中的数据同步，从而无需多次读取源表中的数据，因此，可以解决相关技术中存在的数据同步时需要多次读取源表中的数据，对源表造成压力的问题，进而达到了减轻源表的压力，提高数据同步效率的目的。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是本发明实施例的一种数据的同步方法的移动终端的硬件结构框图；

图2是根据本发明实施例的数据的同步方法的流程图；

图3是根据本发明具体实施例的增量数据生产队流程图；