[发明专利]数据的同步方法和装置

说明书

本发明公开了一种数据的同步方法和装置。其中，该方法包括：检测到同步操作，同步操作用于请求将第一节点的目标类型的数据同步至第二节点；获取由同步操作触发的同步任务，同步任务用于将保存在第一节点的从设备上的目标类型的数据同步至第二节点，第一节点包括一个主设备和备份有主设备上数据的多个从设备；执行同步任务，从消息队列中读取包括目标类型的数据的目标消息，消息队列中缓存的消息携带有从第一节点的从设备获取的各个类型的数据；将目标消息中的目标类型的数据保存至第二节点。本发明解决了相关技术中进行数据同步处理时效率较低的技术问题。

技术领域

本发明涉及互联网领域，具体而言，涉及一种数据的同步方法和装置。

背景技术

数据备份是容灾和数据分析的基础，其主要是为防止系统出现操作失误或系统故障导致数据丢失，而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。传统的数据备份主要是采用内置或外置的磁带机进行冷备份。但是这种方式只能防止操作失误等人为故障，而且其恢复时间也很长。随着技术的不断发展，数据的海量增加，不少的企业开始采用网络备份。网络备份一般通过专业的数据存储管理软件结合相应的硬件和存储设备来实现。

Mysql提供了一种多主一从的网络备份架构，实现数据的多源同步。系统中存在多个Master节点(即主节点或源节点)和一个Slave节点(即从节点)。多个主节点的数据通过二进制日志文件同步到从节点上，达到数据同步的效果。当一个Master节点挂掉时，可以通过从节点上的数据恢复主节点的数据。

使用上述的Mysql官方提供的多主一从的架构设计，存在如下三方面缺点：(1)在其中一个主节点挂掉，利用从节点恢复主节点的数据的过程中，由于主节点的数据未完全恢复，故无法为用户提高有效服务，从而影响数据服务的可用性；(2)利用这种方案设计，需要数据同步的对象(如数据库、数据表等)是固定的，只允许主节点和目标机器(即从节点)的固定表进行同步，灵活性较差；(3)多主一从的架构设计使得从节点存在单点故障风险，在从节点故障时需要手工恢复从节点的数据，由于数据同步时只允许固定表之间的同步，在用户有新的同步需求时，需要手动修改底层的配置文件等信息，从而使得进行数据同步处理时效率较低。

针对上述相关技术中进行数据同步处理时效率较低的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据的同步方法和装置，以至少解决相关技术中进行数据同步处理时效率较低的技术问题。

根据本发明实施例的一个方面，提供了一种数据的同步方法，该方法包括：检测到同步操作，其中，同步操作用于请求将第一节点的目标类型的数据同步至第二节点；获取由同步操作触发的同步任务，其中，同步任务用于将保存在第一节点的从设备上的目标类型的数据同步至第二节点，第一节点包括一个主设备和备份有主设备上数据的多个从设备；执行同步任务，从消息队列中读取包括目标类型的数据的目标消息，其中，消息队列中缓存的消息携带有从第一节点的从设备获取的各个类型的数据；将目标消息中的目标类型的数据保存至第二节点。

根据本发明实施例的另一方面，还提供了一种数据的同步装置，该装置包括：检测单元，用于检测到同步操作，其中，同步操作用于请求将第一节点的目标类型的数据同步至第二节点；第一获取单元，用于获取由同步操作触发的同步任务，其中，同步任务用于将保存在第一节点的从设备上的目标类型的数据同步至第二节点，第一节点包括一个主设备和备份有主设备上数据的多个从设备；执行单元，用于执行同步任务，从消息队列中读取包括目标类型的数据的目标消息，其中，消息队列中缓存的消息携带有从第一节点的从设备获取的各个类型的数据；保存单元，用于将目标消息中的目标类型的数据保存至第二节点。

在本发明实施例中，通过检测同步操作，在检测到同步操作时执行同步任务，将目标类型的数据从第一节点备份至第二节点，实现了对一类或者多类数据的自动备份，可以解决了相关技术中进行数据同步处理时效率较低的技术问题，进而达到提高数据同步时的处理效率的技术效果。