[发明专利]一种数据同步方法、装置及系统

说明书

本发明的实施例提供一种数据同步方法、装置及系统，涉及存储领域，解决了现有技术中对于同步数据无法有效恢复或者存取同步数据时占用过多IO资源的问题。该方案包括：第一节点接收用户发起的数据修改指令，该数据修改指令至少包括待修改数据的表项标识；第一节点根据表项标识以及预置的表项标识与表项类型的对应关系，确定数据修改指令的表项类型；若数据修改指令的表项类型为复制表项，第一节点则根据数据修改指令生成第一重做日志，第一重做日志中携带有用于指示表项类型的复制表项标签；第一节点将第一重做日志发送至第二节点，以使得第二节点根据复制表项标签和第一重做日志同步第二节点内复制表项的同步数据。

技术领域

本发明涉及存储领域，尤其涉及一种数据同步方法、装置及系统。

背景技术

结构化查询语言(structured query language，SQL)是一种内存数据库(memorydatabase，MDB)查询和程序设计语言，主要用于存取数据以及查询、更新和管理内存数据库中的数据。

具体的，可以使用SQL语句在内存数据库的各个节点内建立临时表和普通表，其中，临时表可用于存放一些临时任务的数据(如用户当前的计费时长等)，当临时表的存储空间不足或者临时任务结束后，节点会清空临时表中的数据，而普通表则用于存放一些重要且稳定性高的数据(如用户的余额数据等，本申请将这类数据称为普通数据)，为了保证普通表中数据的可靠性，节点需要将普通表中的普通数据通过IO接口写入磁盘进行持久化管理。

进一步地，在节点将普通数据写入磁盘之前，还需要遵循WAL(write-aheadlogging，预写式日志)原则生成普通表中发生变化的普通数据的重做日志(redo log)，并将该重做日志发送至其他节点，其中，该重做日志用于描述普通表中的普通数据的修改信息，这样一来，其他节点就可以根据该重做日志对自身的普通表进行修改，以保证各个节点的普通表中所存放的普通数据的同步性和一致性，可避免某一节点发生故障时，该节点的普通表中的数据无法恢复的问题。

然而，对于需经常参与内存数据库中的关系运算的数据或者用户的会话信息等数据来说，这类数据不要求写入磁盘进行持久化管理，但要求保证节点之间数据的一致性(本申请将这类数据统一称作同步数据)，可见，如果将同步数据存放在临时表中，当节点清空临时表中的数据后，同步数据就无法恢复，如果将同步数据存放在普通表中，虽然可以从其他节点中恢复该同步数据，但是节点需要将普通表中的同步数据通过IO接口多次读写磁盘进行持久化管理，占用过多的IO资源，导致整个内存数据库中数据存取性能的下降。

发明内容

本发明的实施例提供一种数据同步方法、装置及系统，解决了现有技术中对于同步数据无法有效恢复或者存取同步数据时占用过多IO资源的问题。

为达到上述目的，本发明的实施例采用如下技术方案：

本发明的实施例提供一种数据同步方法，包括：

第一节点接收用户发起的数据修改指令，所述数据修改指令至少包括待修改数据的表项标识，所述表项标识用于指示所述待修改数据所属的表项类型；

所述第一节点根据所述表项标识以及预置的表项标识与表项类型的对应关系，确定所述数据修改指令的表项类型；

若所述数据修改指令的表项类型为用于存储同步数据的复制表项，所述第一节点则根据所述数据修改指令生成第一重做日志，所述第一重做日志中携带有用于指示表项类型的复制表项标签，所述第一重做日志用于指示复制表项中同步数据的变化情况；

所述第一节点将所述第一重做日志发送至第二节点，以使得所述第二节点根据所述复制表项标签和所述第一重做日志同步第二节点内复制表项的同步数据，所述第二节点为对所述第一节点的数据进行备份的节点。

结合第一方面，在第一方面的第一种可能的实现方式中，所述第一节点中还设有用于存储普通数据的普通表项，其中，