[发明专利]数据写入的方法、装置及服务器有效
申请号: | 201711144536.0 | 申请日: | 2017-11-17 |
公开(公告)号: | CN107864209B | 公开(公告)日: | 2021-05-18 |
发明(设计)人: | 余涛 | 申请(专利权)人: | 北京联想超融合科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F3/06;H04L12/24 |
代理公司: | 北京鼎佳达知识产权代理事务所(普通合伙) 11348 | 代理人: | 王伟锋;刘铁生 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 写入 方法 装置 服务器 | ||
本发明公开一种数据写入的方法、装置及服务器,涉及数据处理技术领域,能够解决现有的分布式存储系统可靠性较低的问题。本发明的方法主要包括:检测当前节点是否含有写入失败记录,其中,写入操作需要将数据写入至少一个备用节点中,所述写入失败记录用于记录写入失败节点的节点标识与被写入失败的数据的基本信息之间的对应关系,所述写入失败节点属于所述被写入失败的数据所对应的备用节点;若有写入失败记录,则根据所述节点标识,将所述基本信息发送给所述写入失败节点,以便所述写入失败节点根据所述基本信息将所述被写入失败的数据进行重新写入。本发明主要适用于基于分布式存储系统存储数据的场景中。
技术领域
本发明涉及数据处理技术领域,特别是涉及一种数据写入的方法、装置及服务器。
背景技术
随着互联网技术的发展,数据的存储方法也变得多样化。在当今大数据时代,为了防止数据存储发生瓶颈,出现了一种分布式存储系统,即将数据分散存储在多个独立的设备上。
在实际应用中,为了保证数据的可靠性,在将数据写入分布式存储系统中时,除了将数据写入指定的节点外,还会将数据写入至少一个备用节点,从而当该指定的节点发生宕机时,客户端也可以从备用节点处读取需要的数据。然而,在将数据写入备用节点的过程中,常常会因为网络抖动、备用节点短时间过载等原因导致数据写入失败。在这种情况下,现有技术的做法为:对写入失败的节点进行修复,待修复成功后,继续根据客户端新的写入请求写入数据,或者直接将写入失败的节点更换为新的节点,并由新的节点继续根据客户端后续的写入请求写入数据。
发明人在实现上述发明的过程中发现,由于现有的两种做法都导致写入失败的节点或者新的节点存在数据缺失的现象,即没有存储当时写入失败的数据,所以当后续其他节点都发生故障而无法提供数据时,客户端无法从该写入失败的节点或者新的节点中读取当时写入失败的数据,由此导致整个分布式存储系统的可靠性降低。
发明内容
有鉴于此,本发明提供一种数据写入的方法、装置及服务器,能够解决现有的分布式存储系统可靠性较低的问题。
第一方面,本发明提供了一种数据写入的方法,所述方法包括:
检测当前节点是否含有写入失败记录,其中,写入操作需要将数据写入至少一个备用节点中,所述写入失败记录用于记录写入失败节点的节点标识与被写入失败的数据的基本信息之间的对应关系,所述写入失败节点属于所述被写入失败的数据所对应的备用节点;
若有写入失败记录,则根据所述节点标识,将所述基本信息发送给所述写入失败节点,以便所述写入失败节点根据所述基本信息将所述被写入失败的数据进行重新写入。
第二方面,本发明提供了一种数据写入的装置,所述装置包括:
检测单元,用于检测当前节点是否含有写入失败记录,其中,写入操作需要将数据写入至少一个备用节点中,所述写入失败记录用于记录写入失败节点的节点标识与被写入失败的数据的基本信息之间的对应关系,所述写入失败节点属于所述被写入失败的数据所对应的备用节点;
发送单元,用于当所述检测单元确定有写入失败记录时,根据所述节点标识,将所述基本信息发送给所述写入失败节点,以便所述写入失败节点根据所述基本信息将所述被写入失败的数据进行重新写入。
第三方面,本发明提供了一种服务器,所述服务器为分布式存储系统中的一个节点;
其中,所述服务器包括存储介质和处理器;
所述存储介质,用于存储所述处理器执行的指令以及所述处理器执行指令过程中所需的数据;
所述处理器,用于执行以下指令:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京联想超融合科技有限公司,未经北京联想超融合科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711144536.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种新媒体资讯融合的方法
- 下一篇:叉车的远程监控系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置