[发明专利]写数据的方法和装置有效
申请号: | 201810068940.2 | 申请日: | 2018-01-24 |
公开(公告)号: | CN108418859B | 公开(公告)日: | 2020-11-06 |
发明(设计)人: | 毕杰山;钟超强;钟延辉 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京龙双利达知识产权代理有限公司 11329 | 代理人: | 张欣;王君 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 方法 装置 | ||
本申请提供了一种写数据的方法和装置,该方法可以应用于双活集群,双活集群包括第一集群和第二集群,第一集群中设置有远端预写日志WAL,方法包括:客户端向双活集群发送写请求,写请求记录待存储的目标数据;若第一集群按照预设规则存储目标数据成功,且第二集群按照预设规则写目标数据失败,客户端接收第一响应消息,第一响应消息指示第二集群按照预设规则写目标数据失败;客户端向第一集群的远端WAL中写入目标数据,远端WAL用于指示第一集群将远端WAL存储的目标数据存储到第二集群。有利于在维护双活集群中目标数据的一致性方面,降低对客户端的依赖性,减小客户端的开发代价。
技术领域
本申请涉及计算机领域,并且更具体地,涉及写数据的方法和装置。
背景技术
双活集群的特点是两个集群都是在线运行的,并且可以支持相同的应用负载,也就是说,客户端可以通过应用在双活集群中的两个集群中同时存储的待存储的目标数据,这样,在客户端通过应用从双活集群中读取数据时,如果双活集群中有一个集群故障,另一个集群还可以正常工作,那么客户端可以直接通过正常工作的集群读取数据。由此可知,基于双活集群的数据存储机制,在提高存储数据的安全性的同时,还有利于提高应用运行的可靠性。
在向双活集群存储数据的过程中,客户端通过应用同时向双活集群中的第一集群和第二集群存储目标数据,只有当目标数据同时存储至第一集群和第二集群时,客户端向双活集群写目标数据的过程才算成功。如果在向双活集群存储数据的过程中,有一个集群故障,例如,第一集群故障,此时,客户端需要将原本存储至第一集群的目标数据存储至第三方集群,直到第一集群恢复正常工作,可以存储数据时,客户端再从第三方集群中将目标数据读出,并存储至第一集群。
在上文介绍的向双活集群存储数据的过程中,需要客户端对目标数据在双活集群中的一致性进行维护,对客户端的依赖性较高,也就是说,在维护目标数据在双活集群中的一致性方面,客户端的开发代价较高。
发明内容
本申请提供一种写数据的方法和装置,有利于在维护双活集群中目标数据的一致性方面,降低对客户端的依赖性,减小客户端的开发代价。
第一方面,提供了一种写数据的方法,该方法可以应用于双活集群,所述双活集群包括第一集群和第二集群,所述第一集群中设置有远端预写日志WAL,所述方法包括:客户端向所述双活集群发送写请求,所述写请求记录待存储的目标数据;若所述第一集群按照预设规则存储所述目标数据成功,且所述第二集群按照所述预设规则写所述目标数据失败,所述客户端接收第一响应消息,所述第一响应消息指示所述第二集群按照所述预设规则写所述目标数据失败;所述客户端向所述第一集群的所述远端WAL中写入所述目标数据,所述远端WAL用于指示所述第一集群将所述远端WAL存储的所述目标数据存储到所述第二集群。
上述远端WAL用于存储客户端向第二集群中存储的未存储成功的数据,或者说,远端WAL用于存储待存储至第二集群的数据。
上述远端WAL用于指示所述第一集群将所述远端WAL中存储的所述目标数据存储到所述第二集群,可以理解为,第一集群将远端WAL中的目标数据至第二集群中。
需要说明的是,上述第一响应消息可以是第一集群发送至所述客户端的,还可以是第二集群发送至所述客户端的,还可以是管理第一集群和第二集群的集中控制器向客户端发送的。
可选地,上述双活集群为HDFS与HBase构成的存储系统时,上述控制器可以指HBase。
在本申请实施例中,当目标数据按照预设规则在第一集群中存储成功,却未按照预设规则在第二集群中存储成功时,客户端可以将第二集群中未成功存储的目标数据,存储至第一集群中的远端WAL中,以便于由第一集群基于远端WAL,将第二集群中未存储成功的目标数据存储至第二集群中,避免了现有技术中,需要依赖客户端将第二集群中未存储成功的目标数据从第三方存储设备中读出,重新存储至第二集群,有利于在维护双活集群中目标数据的一致性方面,降低对客户端的依赖性,减小客户端的开发代价。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810068940.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置