[发明专利]数据同步方法、装置、设备及计算机可读存储介质在审
申请号: | 201910842695.0 | 申请日: | 2019-09-06 |
公开(公告)号: | CN110737719A | 公开(公告)日: | 2020-01-31 |
发明(设计)人: | 刘子锐;谷忠言 | 申请(专利权)人: | 深圳平安通信科技有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27 |
代理公司: | 44507 深圳市力道知识产权代理事务所(普通合伙) | 代理人: | 何姣 |
地址: | 518000 广东省深圳市前海深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 快照 同步的 数据同步 属性信息 更新 数据块 传输 计算机可读存储介质 第一数据 发送 灵活 申请 | ||
本申请涉及数据同步,提供一种数据同步方法、装置、设备及计算机可读存储介质,该方法包括:通过对比接收到的目标从节点上每个第一数据块各自对应的当前快照块的第一属性信息与获取到的本地的每个第二数据块各自对应的当前快照块的第二属性信息,确定出需要同步的快照块集,同时将需要同步的快照块集发送至目标从节点,以供目标从节点基于快照块集中的每个快照块更新对应的数据块从而可以根据实际情况灵活地控制需要传输及更新的快照,也即,需要同步的快照才传输及更新,而不需要同步的快照不传输及更新,所以减少了同步时间,因此提高了数据同步的效率。
技术领域
本申请涉及数据处理领域,尤其涉及一种数据同步方法、装置、设备及计算机可读存储介质。
背景技术
在大数据时代下,随着数据规模和复杂度的不断增加,对分布式存储系统的性能要求越来越高。
所谓分布式存储系统,是指将数据分散存储在多台独立的设备上,一台独立的设备称为一个节点。通常情况下,当分布式存储系统发生故障时,导致某一个或某几个节点处于脱机状态,在故障消失之后,当该节点或这些节点再次处于联机状态时,通常需要对该节点或这些节点中的数据进行同步,以保证所有节点之间的数据一致性。
在传统方法中,通常采用全量复制方式,将主节点上的数据同步至重新处于联机状态的从节点,在上述情况下,因为需要同步的数据的数据量庞大,所以需要花费长时间才能完成数据的同步过程,从而导致数据同步的效率低下,同时因为传输的数据的数据量大,所以增加了网络带宽的负担。
因此,如何提高数据同步的效率及降低网络带宽的负担是目前亟待解决的问题。
发明内容
本申请的主要目的在于提供一种数据同步方法、装置、设备及计算机可读存储介质,旨在提高数据同步的效率及降低网络带宽的负担。
第一方面,本申请提供一种数据同步方法,所述数据同步方法包括以下步骤:
接收目标从节点发送的每个第一数据块各自对应的当前快照块的第一属性信息;
获取每个第二数据块各自对应的当前快照块的第二属性信息;
根据每个第一数据块各自对应的当前快照块的第一属性信息和每个第二数据块各自对应的当前快照块的第二属性信息,确定待同步的快照块集;
将所述快照块集发送至所述目标从节点,以供所述目标从节点基于所述快照块集中的每个快照块更新对应的数据块。
第二方面,本申请还提供一种数据同步装置,所述数据同步装置包括:
接收模块,用于接收目标从节点发送的每个第一数据块各自对应的当前快照块的第一属性信息;
获取模块,用于获取每个第二数据块各自对应的当前快照块的第二属性信息;
确定模块,用于根据每个第一数据块各自对应的当前快照块的第一属性信息和每个第二数据块各自对应的当前快照块的第二属性信息,确定待同步的快照块集;
发送模块,用于将所述快照块集发送至所述目标从节点,以供所述目标从节点基于所述快照块集中的每个快照块更新对应的数据块。
第三方面,本申请还提供一种计算机设备,所述计算机设备包括处理器、存储器、以及存储在所述存储器上并可被所述处理器执行的计算机程序,其中所述计算机程序被所述处理器执行时,实现如上述的数据同步方法的步骤。
第四方面,本申请还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其中所述计算机程序被处理器执行时,实现如上述的数据同步方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳平安通信科技有限公司,未经深圳平安通信科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910842695.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:数据备份方法和装置
- 下一篇:一种DB2数据库数据同步方法、装置、系统