[发明专利]一种远程复制方法、装置、备份端设备及系统

说明书

技术领域

本发明涉及数据复制技术领域，更具体地说，涉及一种远程复制方法、装置、备份端设备及系统。

背景技术

远程复制是一种高性能的数据备份和容灾恢复技术，目前主要基于重复数据删除（重删）技术实现的远程复制。重删技术可在某个时间周期内查找不同文件中不同位置的重复可变大小的数据块，将其中重复的数据块用指示符取代，从而使得高度冗余的数据集在存储系统中所占用的存储量大幅减小。

现有基于重删技术实现的远程复制的方式主要为：将数据流划分为一个个区域，每个区域生成一个标记符，通过比较区域标记符来确定本区域是否与另一个区域的数据相似，将相似区域中的一个区域相对于另一个区域的新增数据进行增量压缩，同时删除相似区域的重复数据，将重删后的数据和新增数据传输给需要所述对端设备，从而在减少数据传输量的基础上实现远程复制。

发明人在实现本发明的过程中发现：现有基于重删技术实现的远程复制的方式并没有考虑不同带宽大小、不同远程复制文件大小对远程复制的性能所带来的影响，即没有根据带宽大小和需要远程复制文件的大小进行自适应的远程复制所需的数据的传输，远程复制的性能有限。比如在带宽不足，需要进行远程复制的文件较大时，现有技术很容易导致带宽拥堵，导致进行远程复制的数据传输的迟缓，影响远程复制所需时间，降低了远程复制的效率；而在带宽充足，需要进行远程复制的文件较小时很容易导致带宽的浪费，无法进一步提高远程复制的性能。

发明内容

有鉴于此，本发明实施例提供一种远程复制方法、装置、备份端设备及系统，以解决现有技术没有考虑不同带宽大小、不同远程复制文件大小对远程复制的性能所带来的影响的问题。

为实现上述目的，本发明实施例提供如下技术方案：

第一方面，本发明实施例提供一种远程复制方法，包括：

读取重删后的文件；

若网络带宽大于预设带宽限值，且所述文件的大小大于预设文件限值，读取所述文件对应的元数据，通过所述元数据在本地确定所述元数据对应的数据块与进行远程复制的对端设备已复制数据块的第一差异数据；

若所述第一差异数据的大小小于预设差异限值，将所述第一差异数据与所述元数据发送至所述对端设备，以便所述对端设备实现远程复制；

若所述第一差异数据的大小不小于所述预设差异限值，将所述第一差异数据对应的第一差异元数据发送至所述对端设备，接收所述对端设备通过所述第一差异元数据所确定的所述第一差异数据与所述对端设备已复制数据块的第二差异数据所对应的第二差异元数据，根据所述第二差异元数据将所述第二差异数据发送至所述对端设备，以便所述对端设备实现远程复制。

结合第一方面，在第一方面的第一种可能的实现方式中，所述通过所述元数据在本地确定所述元数据对应的数据块与所述对端设备已复制数据块的第一差异数据包括：

将所述元数据对应的指纹与本地缓存的远程指纹表中缓存的指纹进行比对，确定所述元数据对应的指纹与所述远程指纹表中缓存的指纹的第一差异指纹，所述第一差异指纹对应的数据块为第一差异数据；

其中，所述远程指纹表中存储有已复制到所述对端设备且在所述对端设备所存储的数据块中为重复数据块的指纹。

结合第一方面，在第一方面的第二种可能的实现方式中，所述接收所述对端设备通过所述第一差异元数据所确定的所述第一差异数据与所述对端设备已复制数据块的第二差异数据所对应的第二差异元数据包括：

在所述对端设备将所述第一差异元数据的指纹与所述对端设备已复制数据块的指纹进行比对，确定第二差异指纹后，接收所述第二差异指纹对应的第二差异元数据。

结合第一方面，在第一方面的第三种可能的实现方式中，所述方法还包括：

若网络带宽大于预设带宽限值，且所述文件的大小小于预设文件限值，将所述文件发送至所述对端设备，以便所述对端设备实现远程复制。

结合第一方面，在第一方面的第四种可能的实现方式中，所述方法还包括：

若网络带宽不大于预设带宽限值，读取所述文件对应的元数据，将所述元数据发送至所述对端设备，接收所述对端设备所确定的所述元数据对应的数据块与所述对端设备已复制数据块的第三差异数据对应的第三差异元数据，根据所述第三差异元数据将所述第三差异数据发送至所述对端设备，以便所述对端设备实现远程复制。

结合第一方面，在第一方面的第五种可能的实现方式中，所述方法还包括：