[发明专利]基于网络存储设备集群的数据分布式存储方法及装置有效

专利信息
申请号: 201910385874.6 申请日: 2019-05-09
公开(公告)号: CN110149384B 公开(公告)日: 2022-06-24
发明(设计)人: 秦江波 申请(专利权)人: 北京猫盘技术有限公司
主分类号: H04L67/104 分类号: H04L67/104;H04L67/1042;H04L67/1097
代理公司: 北京知果之信知识产权代理有限公司 11541 代理人: 唐海力
地址: 100094 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 网络 存储 设备 集群 数据 分布式 方法 装置
【说明书】:

本申请公开了一种基于网络存储设备集群的数据分布式存储方法及装置。该方法包括在多个网络存储设备之间建立第一连接;以及在预设服务器和多个所述网络存储设备之间建立第二连接,以使所述网络存储设备组成分布式存储集群。本申请通过将网络存储设备组成分布式存储集群,解决了公有云和私有云存储成本高的问题。此外,还能够解决集中式存储的单点稳定性、可用性和扩展性问题以及解决分布式存储的分布式节点性能差异问题。本申请适用于将网络中不同类型的存储设备通过应用软件集合起来协同工作,对外提供数据存储和业务访问功能的云存储系统。

技术领域

本申请涉及计算机存储领域,具体而言,涉及一种基于网络存储设备集群的数据分布式存储方法及装置。

背景技术

针对企业客户或个人用户的本地存储资源如计算机、移动硬盘、USB闪存、网络存储设备(英文全称:Network Attached Storage,简称:NAS)等均存在资源和访问的局限,通过使用云存储的可以让使用者在任何时间、地点,通过可连网并安装云存储应用的装置,方便地访问云存储空间和存取数据。

发明人发现,云存储存在存储成本高的问题。进一步,还存在集中式存储节点的单点稳定性、扩展性的问题,分布式存储节点性能差异的问题。

针对相关技术中存储成本高的问题,目前尚未提出有效的解决方案。

发明内容

本申请的主要目的在于提供一种基于网络存储设备集群的数据分布式存储方法及装置,以解决存储成本高的问题。

为了实现上述目的,根据本申请的一个方面,提供了一种基于网络存储设备集群的数据分布式存储方法。

根据本申请的基于网络存储设备集群的数据分布式存储方法包括:在多个网络存储设备之间建立第一连接;以及在预设服务器和多个所述网络存储设备之间建立第二连接,以使所述网络存储设备组成分布式存储集群。

进一步地,在预设服务器和多个所述网络存储设备之间建立第二连接之后还包括:将数据进行分块、分发的步骤,所述将数据进行分块、分发的步骤具体包括:在所述分布式存储集群中的所述网络存储设备根据所述预设服务器上配置的分块策略,对所述数据进行冗余纠错编码得到编码数据对象;将所述编码数据对象划分为多个数据分块存储在第N个网络存储设备,并将冗余存储至第N+1个和/或第N+2个网络存储设备中,其中,N为自然数;将用于数据分块存储的所述网络存储设备和相应的存储位置,记录在所述预设服务器,以使所述预设服务器可根据所述存储位置进行寻址。

进一步地,在预设服务器和多个所述网络存储设备之间建立第二连接,以使所述网络存储设备组成分布式存储集群后,建立数据的分块分发策略,所述分块分发策略的建立方法具体包括:通过在预设服务器初始化后配置预设参数的多维度权重;获取每个所述网络存储设备上报的预设参数;根据预设参数和所述多维度权重,对每个所述网络存储设备打分;将所述数据的分块优先分发至获取打分分值高的所述网络存储设备。

进一步地,在多个网络存储设备之间建立第一连接包括:在多个网络存储设备之间建立P2P连接;在预设服务器和多个所述网络存储设备之间建立第二连接,以使所述网络存储设备组成分布式存储集群包括:在预设服务器和每个所述网络存储设备之间建立长连接,以使所述网络存储设备组成分布式存储集群。

进一步地,在多个网络存储设备之间建立第一连接包括:在多个网络存储设备之间建立P2P(Peer-to-Peer)连接;在预设服务器和多个所述网络存储设备之间建立第二连接,以使所述网络存储设备组成分布式存储集群包括:在至少包括索引和信令服务器中和每个所述网络存储设备之间建立长连接,以使所述网络存储设备组成分布式存储集群。

为了实现上述目的,根据本申请的另一方面,提供了一种基于网络存储设备集群的数据分布式存储装置。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京猫盘技术有限公司,未经北京猫盘技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910385874.6/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top