[发明专利]一种分布式存储服务切换方法及装置有效

专利信息
申请号: 202011344216.1 申请日: 2020-11-25
公开(公告)号: CN112596960B 公开(公告)日: 2023-06-13
发明(设计)人: 钟晋明 申请(专利权)人: 新华三云计算技术有限公司
主分类号: G06F11/20 分类号: G06F11/20;G06F3/06
代理公司: 暂无信息 代理人: 暂无信息
地址: 610000 四川省成都市中国(四川)自由贸易试验区成都高*** 国省代码: 四川;51
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 分布式 存储 服务 切换 方法 装置
【说明书】:

本申请涉及数据存储技术领域,特别涉及一种分布式存储服务切换方法及装置。该方法包括:接收客户端发送的第一数据读写请求,并确定处理所述第一数据读写请求的目标存储服务器;将所述第一数据读写请求发送给目标存储服务器对应的目标智能网卡,以使得所述目标智能网卡基于本地运行的分布式存储服务对所述第一数据读写请求进行数据处理;若检测到所述目标智能网卡故障,则启动所述目标存储服务器上部署的被设置为待启动状态的分布式存储服务,以使得所述目标存储服务器基于本地运行的分布式存储服务对所述客户端发送的需所述目标存储服务器进行处理的第二数据读写请求进行数据处理。

技术领域

本申请涉及数据存储技术领域,特别涉及一种分布式存储服务切换方法及装置。

背景技术

分布式存储,是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据,存储服务器成为系统性能的瓶颈,也是可靠性和安全性的焦点,不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构,利用多台存储服务器分担存储负荷,利用位置服务器定位存储信息,它不但提高了系统的可靠性、可用性和存取效率,还易于扩展。

传统的ServerSan(软件定义存储)分布式存储架构为:服务器上配置普通网卡,分布式存储软件运行在主机的x86 CPU上。节点间通信采用TCP协议,经内核网络协议栈。各节点上分布式存储管理物理主机本地(PCIe)的NVMe设备。集群联动对外提供存储服务,并保证存储数据的一致性。

然而,传统的分布式存储架构中,运行在物理机上的分布式存储软件会占用物理机的cpu,内存等系统资源;与虚拟机共用物理机cpu资源,分布式存储软件占用的cpu数量会影响可建立的虚拟机数量。运行在物理机的分布式存储性能会受物理机OS和虚拟机运行的影响。运行在物理机的分布式存储软件管理其本地存储资源,也需要消耗一部分系统资源,即通过系统调用访问抽象的块层。

为了解决上述问题,可以通过在存储服务器上配置nvme盘,智能网卡,及配置Nvmeof target。智能网卡上有独立于物理服务器的cpu,如Arm cpu,在Arm cpu上运行分布式存储软件,分布式存储软件所管理数据盘是通过Nvmeof连接到本主机的Nvmeof target形成网络数据盘。多个Arm存储结点组成分布式存储。

但是,基于智能网卡的分布式存储集群的可靠性受限于智能网卡的Arm节点的数量,如最小分布式存储集群节点数为3。当3个智能网卡组成集群环境里的一个智能网卡故障时,集群里只有2个节点时,存在脑裂风险;当3个智能网卡组成集群环境里的超过两个智能网卡故障时,集群不能提供服务。

对一定数量节点的分布式存储,当集群少量节点down,剩余存储集群节点数量仍能满足要求,常规处理方法是触发数据平衡。当只有智能网卡故障,而磁盘是正常的,此时因为智能网卡故障,导致此节点不能正常读写磁盘,集群虽然还能提供存储服务,但新的存储IO会分散到其他节点的磁盘上,最终引起整个集群的数据不均衡。

发明内容

本申请提供了一种分布式存储服务切换方法及装置,用以解决现有技术中存在的由于智能网卡故障而导致分布式存储服务不可用的问题。

第一方面,本申请提供了一种分布式存储服务切换方法,应用于分布式存储系统,所述分布式存储系统中各存储服务器分别配置有对应的智能网卡,各智能网卡上运行分布式存储服务,所述各智能网卡分别与其对应的存储服务器上用于管理本地存储资源的控制器建立RDMA通道,所述各存储服务器上部署有被设置为待启动状态的分布式存储服务,所述方法包括:

接收客户端发送的第一数据读写请求,并确定处理所述第一数据读写请求的目标存储服务器;

将所述第一数据读写请求发送给目标存储服务器对应的目标智能网卡,以使得所述目标智能网卡基于本地运行的分布式存储服务对所述第一数据读写请求进行数据处理;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三云计算技术有限公司,未经新华三云计算技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011344216.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top