[发明专利]分布式数据复制方法和装置有效
申请号: | 201210430530.0 | 申请日: | 2012-11-01 |
公开(公告)号: | CN103793291B | 公开(公告)日: | 2017-04-19 |
发明(设计)人: | 刘昆鹏 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F3/06 |
代理公司: | 北京同立钧成知识产权代理有限公司11205 | 代理人: | 刘芳 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 数据 复制 方法 装置 | ||
技术领域
本发明涉及通信技术,尤其涉及一种分布式数据复制方法和装置。
背景技术
随着信息社会的发展,数据量越来越大,数据灾备也越来越重要。现在,各存储节点厂商一般通过远程复制技术来实现本地或异地容灾解决方案。容灾系统一般包括本地生产站点和远程灾备站点,通过远程复制技术将本地生产站点的数据备份到远程灾备站点,利用站点分离或地理分离来保证容灾系统对灾难事件的抵御能力,保证数据不丢失或尽量少丢失。远程复制模式分为同步和异步两种。在同步模式中,生产站点需要等待生产站点和灾备站点均写完成后才返回主机响应,因此可以保证零数据丢失,但存在与灾备站点的通信时延,影响主机输入输出(Input Output;以下简称:IO)性能,因此一般同步模式应用于距离小于200km以内的同城容灾场景。在异步模式中,生产站点在接收到写I/O数据后,先将其写入本地数据存储系统,并向应用系统主机返回写完成确认消息,再将数据发送到灾备站点,因此本地应用系统的性能所受到的影响较小,传输距离基本无限制,但由于数据传输存在滞后,因此灾备站点可能存在一定的数据丢失。
在现有技术中,异步远程复制技术典型地包括快照机制和日志机制,将快照数据或日志缓存的主机写数据复制到灾备站点,图1为现有技术中异步远程复制技术的场景示意图,如图1所示为采用快照机制的远程复制过程。在高端多控存储系统中,通常都采用集中式共享架构,多控存储系统中的多个存储节点采用全局共享的方式对一个逻辑单元号设备(Logic Unit Number device;以下简称:LUN)进行共享。
然而,现有技术中的数据复制方法需要对多控存储系统中多个存储节点之间存在互斥访问,从而导致主机写IO时延增加。
发明内容
本发明实施例提供一种分布式数据复制方法和装置,避免了多个存储节点之间互斥访问的现象,尽可能地减少主机写IO的时延。
本发明实施例的第一方面是提供一种分布式数据复制方法,包括:
接收写请求,将所述写请求拆分为多个写子请求,各所述写子请求携带的数据是所述写请求携带的数据的一部分,每个所述写子请求的写地址指向生产站点上的源卷中的一个源子卷,其中,所述源卷被划分为多个源子卷,每个所述源子卷位于生产站点中的一个存储节点上;
根据所述多个写子请求,分别在各所述源子卷中写入数据,并分别生成各所述源子卷的备份信息;
将各所述备份信息发往灾备站点,所述各所述源子卷的备份信息共同构成源卷的备份信息。
在第一方面的第一种可能的实现方式中,所述灾备站点上目标卷被划分为多个目标子卷,每个目标子卷位于所述灾备站点中的一个存储节点上,所述方法进一步包括:
灾备站点接收各所述源子卷的备份信息,并将接收到的各源子卷的备份信息存储到至少一个所述目标子卷中。
结合第一方面或第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,所述根据所述多个写子请求,分别在各所述源子卷中写入数据,并分别生成各所述源子卷的备份信息,包括:
根据各写子请求,分别在所述各写子请求的写地址所指向的各源子卷中写入数据;
按照数据的写入顺序,将所述各写子请求分别记录在各所述源子卷的日志中,以分别生成各所述源子卷的日志;其中,所述源子卷的日志为所述源子卷的备份信息。
结合第一方面的第二种可能的实现方式,在第一方面的第三种可能的实现方式中,所述将各所述源子卷的备份信息发往灾备站点,包括:
将各所述源子卷的日志发往灾备站点,以使灾备站点根据所述日志中记录的写子请求在所述目标卷中的各目标子卷中写入数据。
结合第一方面或第一方面的第二种可能的实现方式,在第四种可能的实现方式中,所述根据所述多个写子请求,分别在各所述源子卷中写入数据,并分别生成各所述源子卷的备份信息,包括:
根据各写子请求,分别在所述各写子请求的写地址所指向的各源子卷中写入数据;
对写入数据后的各所述源子卷中的数据进行快照处理,分别生成各所述源子卷的快照;其中,所述源子卷的快照为所述源子卷的备份信息。
结合第一方面的第四种可能的实现方式,在第五种可能的实现方式中,所述将各所述源子卷的备份信息发往灾备站点,包括:
将各所述源子卷的快照发往灾备站点。
本发明实施例的第二方面是提供一种分布式数据复制装置,包括:
接收模块,用于接收主机发送的写请求;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210430530.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种内核调试方法及系统
- 下一篇:一种Android程序的流式执行方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置