[发明专利]数据写入的方法、装置及服务器有效

专利信息
申请号: 201711144536.0 申请日: 2017-11-17
公开(公告)号: CN107864209B 公开(公告)日: 2021-05-18
发明(设计)人: 余涛 申请(专利权)人: 北京联想超融合科技有限公司
主分类号: H04L29/08 分类号: H04L29/08;G06F3/06;H04L12/24
代理公司: 北京鼎佳达知识产权代理事务所(普通合伙) 11348 代理人: 王伟锋;刘铁生
地址: 100085 北京市*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 写入 方法 装置 服务器
【说明书】:

发明公开一种数据写入的方法、装置及服务器,涉及数据处理技术领域,能够解决现有的分布式存储系统可靠性较低的问题。本发明的方法主要包括:检测当前节点是否含有写入失败记录,其中,写入操作需要将数据写入至少一个备用节点中,所述写入失败记录用于记录写入失败节点的节点标识与被写入失败的数据的基本信息之间的对应关系,所述写入失败节点属于所述被写入失败的数据所对应的备用节点;若有写入失败记录,则根据所述节点标识,将所述基本信息发送给所述写入失败节点,以便所述写入失败节点根据所述基本信息将所述被写入失败的数据进行重新写入。本发明主要适用于基于分布式存储系统存储数据的场景中。

技术领域

本发明涉及数据处理技术领域,特别是涉及一种数据写入的方法、装置及服务器。

背景技术

随着互联网技术的发展,数据的存储方法也变得多样化。在当今大数据时代,为了防止数据存储发生瓶颈,出现了一种分布式存储系统,即将数据分散存储在多个独立的设备上。

在实际应用中,为了保证数据的可靠性,在将数据写入分布式存储系统中时,除了将数据写入指定的节点外,还会将数据写入至少一个备用节点,从而当该指定的节点发生宕机时,客户端也可以从备用节点处读取需要的数据。然而,在将数据写入备用节点的过程中,常常会因为网络抖动、备用节点短时间过载等原因导致数据写入失败。在这种情况下,现有技术的做法为:对写入失败的节点进行修复,待修复成功后,继续根据客户端新的写入请求写入数据,或者直接将写入失败的节点更换为新的节点,并由新的节点继续根据客户端后续的写入请求写入数据。

发明人在实现上述发明的过程中发现,由于现有的两种做法都导致写入失败的节点或者新的节点存在数据缺失的现象,即没有存储当时写入失败的数据,所以当后续其他节点都发生故障而无法提供数据时,客户端无法从该写入失败的节点或者新的节点中读取当时写入失败的数据,由此导致整个分布式存储系统的可靠性降低。

发明内容

有鉴于此,本发明提供一种数据写入的方法、装置及服务器,能够解决现有的分布式存储系统可靠性较低的问题。

第一方面,本发明提供了一种数据写入的方法,所述方法包括:

检测当前节点是否含有写入失败记录,其中,写入操作需要将数据写入至少一个备用节点中,所述写入失败记录用于记录写入失败节点的节点标识与被写入失败的数据的基本信息之间的对应关系,所述写入失败节点属于所述被写入失败的数据所对应的备用节点;

若有写入失败记录,则根据所述节点标识,将所述基本信息发送给所述写入失败节点,以便所述写入失败节点根据所述基本信息将所述被写入失败的数据进行重新写入。

第二方面,本发明提供了一种数据写入的装置,所述装置包括:

检测单元,用于检测当前节点是否含有写入失败记录,其中,写入操作需要将数据写入至少一个备用节点中,所述写入失败记录用于记录写入失败节点的节点标识与被写入失败的数据的基本信息之间的对应关系,所述写入失败节点属于所述被写入失败的数据所对应的备用节点;

发送单元,用于当所述检测单元确定有写入失败记录时,根据所述节点标识,将所述基本信息发送给所述写入失败节点,以便所述写入失败节点根据所述基本信息将所述被写入失败的数据进行重新写入。

第三方面,本发明提供了一种服务器,所述服务器为分布式存储系统中的一个节点;

其中,所述服务器包括存储介质和处理器;

所述存储介质,用于存储所述处理器执行的指令以及所述处理器执行指令过程中所需的数据;

所述处理器,用于执行以下指令:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京联想超融合科技有限公司,未经北京联想超融合科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201711144536.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top