[发明专利]分布式文件系统、文件访问方法以及客户端有效
申请号: | 201210261331.1 | 申请日: | 2012-07-26 |
公开(公告)号: | CN103581229B | 公开(公告)日: | 2018-06-15 |
发明(设计)人: | 伍海君;朱会灿;邓大付;李锐;邹永强;董乘宇;阙太富;王磊;杨绍鹏;张书鑫;赵大勇;刘畅;陈晓东;张银锋 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F17/30 |
代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 杨春香;宋志强 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 访问 分布式文件系统 路由信息 文件访问 客户端 元信息 元信息服务器 节点服务器 文件目录 主服务器 存储 关联 申请 | ||
本申请提供了分布式文件系统、文件访问方法以及客户端。其中,该方法包括:访问主服务器Master Server存储的文件目录,并从Master Server获取与需要访问的文件相关联的元信息服务器Meta Server的路由信息;利用获取的路由信息访问Meta Server,并从该Meta Server中获取需要访问的文件的元信息,利用获取的元信息从多个节点服务器Node Server上访问需要访问的文件。
技术领域
本申请涉及数据存储技术,特别涉及分布式文件系统、文件访问方法以及客户端。
背景技术
目前,在工业界具有典型代表性的分布式文件系统是Google公司的分布式文件系统,简称GFS。该GFS主要由一个主服务器(Master Server)和众多块服务器(ChunkServer)。其中,Master Server主要负责存储文件目录、以及文件目录中各文件的元(meta)信息。这里,meta信息主要包括:文件的大小、文件被分成的数据块的数量、文件被分成的数据块所处的Chunk Server等;Chunk Server主要负责存储文件被分成的数据块。通常,一个文件会按照一定大小划分为多个数据块,每一个数据块称为一个Chunk,这些数据块分散存储在不同的Chunk Server。
但是,由于GFS只有一个Master Server提供文件目录和文件meta信息的查询,这会限制文件的并发访问,并且,因单一Master Server的内存限制,也会限制GFS的文件数目。
发明内容
本申请提供了分布式文件系统、文件访问方法以及客户端,以提高单一集群的文件数目以及文件的并发访问量。
本申请提供的技术方案包括:
一种分布式文件系统,包括:
主服务器Master Server,用于存储文件目录、以及与文件目录中各文件相关联的Meta Server的路由信息;
Meta Server,用于存储相关联的文件的元信息,Meta Server的数量大于等于1;
节点服务器Node Server,用于存储文件被划分成的数据块和/或数据块的备份,Node Server的数量大于等于1;
所述Master Server在存储的文件目录中存在客户端需要访问的文件时,从存储的路由信息中找到与该文件相关联的Meta Server的路由信息并提供给客户端,以使客户端利用所述Master Server提供的路由信息访问Meta Server,所述Meta Server接收到客户端的访问时,提供该客户端需要访问的文件的元信息给客户端,以使客户端利用所述Meta Server提供的元信息从Node Server访问需要访问的文件。
一种文件访问方法,包括:
访问主服务器Master Server存储的文件目录,并从Master Server获取与需要访问的文件相关联的元信息服务器Meta Server的路由信息;
利用获取的路由信息访问Meta Server,并从该Meta Server中获取需要访问的文件的元信息;
利用获取的元信息从多个节点服务器Node Server上访问需要访问的文件。
一种应用于文件访问的客户端,包括:
第一访问单元,用于访问主服务器Master Server存储的文件目录,并从MasterServer获取与本客户端需要访问的文件相关联的元信息服务器Meta Server的路由信息;
第二访问单元,用于利用所述第一访问单元获取的路由信息访问Meta Server,并从该Meta Server中获取本客户端需要访问的文件的元信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210261331.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:多金属液态喷射沉积增材制造方法
- 下一篇:一种有凸出条的拉杆箱