[发明专利]一种跨地域数据传输的方法和设备

说明书

本申请的目的是提供一种跨地域数据传输的方法和设备，通过获取对应客户设备发送的元数据信息，并将所述元数据信息发送给对应元数据传输节点设备，其中，所述元数据信息包括对应所述客户设备的数据复制进度信息；获取对应所述元数据传输节点设备发送的待转发数据信息，并将所述待转发数据信息推送给对应所述客户设备，其中，所述待转发数据信息包括其他所述客户设备的数据复制进度信息，有效地将对应客户设备发送的元数据信息发送给对应元数据传输节点设备；并将获取的对应所述元数据传输节点设备发送的待转发数据信息推送给对应所述客户设备，以实现元数据信息同步。

技术领域

本申请涉及计算机领域，尤其涉及一种跨地域数据传输的技术。

背景技术

数据异地复制是互联网的一个重要组成部分，广泛应用于计算机网络环境，数据异地复制包括同步复制和异步复制。

现有技术中，在小延迟的场景下(例如，杭州到上海)，同步复制的延迟可以忽略不计，对应用影响较小，其中，多地同步复制的业界标准是分布式一致性协议(Paxos协议)。在异步复制时，发送方不需要等待接收方确认接收到之前就可以继续执行所述发送方的逻辑(例如，非关系型数据库服务(AWS DynamoDB Streaming))；进一步地，采用中转服务方式的异步复制提供了最终一致性的数据一致性维护，在中转服务模式下，强一致性的共享日志功能(shared log功能)取代应用自带的数据复制机制，通过链复制(例如，AWS S3meta一致性维护)或推送部分逻辑到客户端(例如，未加工的闪存单元集群(Clusters of Raw FlashUnits))，能够自身提供数据可靠性的保证。

在跨地域场景中，各地域之间的网络延迟会达到100ms以上。由于在跨地域场景中，同步复制的延迟较大，所以远距离间的数据传输一般不采用同步复制，而采用具有强一致性的支持和高吞吐率的异步复制。在直接的异步复制下，由于延迟较长，使得发送方需要缓存大量数据，会对发送方造成内存压力，从而不能更好地扩展；在中转服务模式下的强一致性的共享日志功能，由于在日志上的节点出现失效时，需要解决数据在日志上的可靠性问题，逻辑比较复杂，延迟也会比本地的数据异步复制高很多，同时，在服务故障转移(service failover)时不能保证恢复点目标(RPO，Recovery Point Objective)。

因此，现有技术中在跨地域场景中采用具有强一致性的支持和高吞吐率的异步复制，导致数据同步延迟较长，同时在服务故障转移时不能保证恢复点目标。

发明内容

本申请的目的是提供一种跨地域数据传输的方法与设备，以解决现有技术中在跨地域场景中采用具有强一致性的支持和高吞吐率的异步复制，导致数据同步延迟较长，同时在服务故障转移时不能保证恢复点目标的问题。

根据本申请的一个方面，提供了一种在元数据客户接入设备端的跨地域数据传输的方法，包括：

获取对应客户设备发送的元数据信息，并将所述元数据信息发送给对应元数据传输节点设备，其中，所述元数据信息包括对应所述客户设备的数据复制进度信息；

获取对应所述元数据传输节点设备发送的待转发数据信息，并将所述待转发数据信息推送给对应所述客户设备，其中，所述待转发数据信息包括其他所述客户设备的数据复制进度信息。

根据本申请的一个方面，提供了一种在元数据传输节点设备端的跨地域数据传输的方法，包括：

接收对应元数据客户接入设备发送的对应客户设备的元数据信息，并向其他元数据传输节点设备发送所述元数据信息，其中，所述元数据信息包括对应所述客户设备的数据复制进度信息；

接收对应上一级所述元数据传输节点设备发送的待转发数据信息，并对所述待转发数据信息处理后发送至对应下一级所述元数据传输节点设备，其中，所述待转发数据信息包括其他所述客户设备的数据复制进度信息；