[发明专利]一种大数据分布式存储管理方法及系统有效
申请号: | 201811119218.3 | 申请日: | 2018-09-25 |
公开(公告)号: | CN109407977B | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 张彩霞;郭静;王向东;王新东;胡绍林 | 申请(专利权)人: | 佛山科学技术学院 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/182;G06F16/176 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 王国标 |
地址: | 528000 广东省佛山市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及大数据存储技术领域,具体涉及一种大数据分布式存储管理方法及系统,通过将数据分块和校验,以分块的形式存放校验后的数据块信息,将所述数据块信息发送给元数据服务器;通过元数据服务器处理元数据请求,存储文件系统的元数据信息,存储自身名字空间管理,提供系统服务;将元数据信息以镜像文件和日志文件的方式持久化到共享存储池中;通过同步元数据服务器的名字空间信息从而使得集群中每个元数据服务器利用备用节点进行热备份,从而实现对元数据服务器的热备份,本发明能保证大数据存储访问过程中数据的可靠性。 | ||
搜索关键词: | 一种 数据 分布式 存储 管理 方法 系统 | ||
【主权项】:
1.一种大数据分布式存储管理系统,其特征在于,所述系统包括数据节点、元数据服务器、共享存储池、备用节点;所述数据节点,用于将数据分块,形成数据块信息,对所述数据块信息进行校验,以分块的形式存放校验后的数据块信息,将所述数据块信息发送给元数据服务器;所述元数据服务器,用于处理元数据请求,存储文件系统的元数据信息,存储自身名字空间管理,提供系统服务;所述共享存储池,用于同步元数据服务器的名字空间信息;所述备用节点,用于对元数据服务器进行热备份。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于佛山科学技术学院,未经佛山科学技术学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811119218.3/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置