[发明专利]数据迁移方法、数据迁移装置、数据迁移设备及存储介质

说明书

本申请涉及存储技术领域，具体公开了一种数据迁移方法、数据迁移装置、数据迁移设备及存储介质，通过在执行将源存储集群至目标存储集群的全量数据迁移任务时，记录源存储集群相较于目标存储集群的数据变更日志，在执行完全量数据迁移任务之后，能够根据数据变更日志确定源存储集群相较于目标存储集群的增量数据，继而执行将增量数据自源存储集群至目标存储集群迁移的增量数据迁移任务，通过基于数据变更日志确定增量数据，相较于迁移工具将源存储集群中的所有数据以及目标存储集群中的所有数据读取到内存中比较得到增量数据的现有增量迁移方案，能够更快地确定增量数据，显著提升增量数据迁移任务的效率，继而提升存储集群间数据迁移的整体效率。

技术领域

本申请涉及存储技术领域，特别是涉及一种数据迁移方法、数据迁移装置、数据迁移设备及存储介质。

背景技术

在执行存储集群间的主备同步、或故障迁移任务时，需要采用迁移工具执行源存储集群到目标存储集群的全量迁移任务。由于全量迁移任务的执行时间较长，如停止源存储集群的业务服务，将极大破坏用户体验、甚至带来破坏性影响，故目前在执行存储集群的全量迁移任务时，源存储集群依然提供业务服务。这也就导致在执行全量迁移任务时，用户不会停止对源存储集群的增加、删除、修改、查询文件等操作，导致源存储集群会发生数据变更。此时就需要进行源存储集群到目标存储集群间的增量数据迁移，以保证源存储集群的数据和目标存储集群的数据完全一致。

在执行增量数据迁移任务时，迁移工具首先需要将源存储集群中的全部数据和目标存储集群中的全部数据均获取至内存中进行逐一对比，发现不一致的数据时，即确认为增量数据，对比得到所有增量数据后，启动将增量数据从源存储集群迁移到目标存储集群的任务。

然而，由于存储集群中的数据量较大，进行存储集群间的增量数据迁移任务时，比较源存储集群的全部数据和目标存储集群的全部数据以确定增量数据的时间会非常漫长，可能会以周为单位进行计算。

提供一种针对迁移工具在执行存储集群间的增量数据迁移任务时的优化改进方案，以提高迁移工具增量迁移的效率，是本领域技术人员需要解决的技术问题。

发明内容

本申请的目的是提供一种数据迁移方法、数据迁移装置、数据迁移设备及存储介质，用于提高迁移工具在执行存储集群间增量迁移的效率。

为解决上述技术问题，本申请提供一种数据迁移方法，包括：

在执行源存储集群至目标存储集群的全量数据迁移任务时，记录所述源存储集群相较于所述目标存储集群的数据变更日志；

在执行完所述全量数据迁移任务之后，根据所述数据变更日志确定所述源存储集群相较于所述目标存储集群的增量数据；

执行将所述增量数据自所述源存储集群至所述目标存储集群迁移的增量数据迁移任务。

可选的，所述执行源存储集群至目标存储集群的全量数据迁移任务，具体包括：

调用迁移工具遍历所述源存储集群的全量数据，记为第一待迁移数据；

调用所述迁移工具执行将所述第一待迁移数据自所述源存储集群迁移至所述目标存储集群的所述全量数据迁移任务。

可选的，所述记录所述源存储集群相较于所述目标存储集群的数据变更日志，具体为：

自所述迁移工具开始遍历所述源存储集群的全量数据的第一时间点开始，记录所述源存储集群相较于所述目标存储集群的所述数据变更日志。

可选的，所述执行所述增量数据自所述源存储集群至所述目标存储集群迁移的增量数据迁移任务，具体包括：

对所述第一时间点到所述迁移工具开始执行对所述第一待迁移数据的所述全量数据迁移任务时的第二时间点之间的第一数据变更日志，判断所述目标存储集群是否包含与所述第一数据变更日志对应的增量数据；