[发明专利]一种基于RDMA的分布式内存文件系统有效
申请号: | 201611261722.8 | 申请日: | 2016-12-30 |
公开(公告)号: | CN108268208B | 公开(公告)日: | 2020-01-17 |
发明(设计)人: | 陆游游;舒继武;陈游旻 | 申请(专利权)人: | 清华大学 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 11201 北京清亦华知识产权代理事务所(普通合伙) | 代理人: | 张润 |
地址: | 10008*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于RDMA的分布式内存文件系统,在分布式内存文件系统初始化阶段,将集群用于文件存储的内存统一划分,并注册到网卡,以支持远端节点进行内存直接访问,进而构建分布式共享内存池;在所述分布式内存共享池之上,通过两级哈希索引分别进行文件索引及文件数据块索引,为所述文件系统提供查询服务;通过自识别远程过程调用方法处理客户端的请求,并返回处理结果。本发明具有如下优点:减少文件在读写时的数据复制、降低响应延迟,并在程序软件中提高文件访问的整体效率。 | ||
搜索关键词: | 内存文件系统 内存 分布式共享内存 远程过程调用 初始化阶段 文件数据块 查询服务 程序软件 哈希索引 内存共享 数据复制 文件存储 文件访问 文件索引 文件系统 响应延迟 远端节点 整体效率 直接访问 网卡 构建 集群 两级 索引 返回 客户 统一 | ||
【主权项】:
1.一种基于RDMA的分布式内存文件系统,其特征在于,所述分布式内存文件系统将各节点内存通过RDMA进行网络互联,所述文件系统包括客户端和服务端,所述客户端提供文件访问接口,供上层应用调用,所述服务端提供元数据服务和数据服务,所述分布式内存文件系统执行以下动作:/nS1:在所述分布式内存文件系统初始化阶段,将集群用于文件存储的内存统一划分,并注册到网卡,以支持远端节点进行内存直接访问,进而构建分布式共享内存池;/nS2:在所述分布式共享内存池之上,通过两级哈希索引分别进行文件索引及文件数据块索引,为所述文件系统提供查询服务;/nS3:通过自识别远程过程调用方法处理所述客户端的请求,并返回处理结果;/n其中,所述两级哈希索引的步骤包括:在客户端发起文件访问请求时,根据文件全路径名计算存放该文件元数据的元数据服务器ID,其中,元数据服务器ID由系统配置文件决定;客户端将请求信息发往对应ID的元数据服务器,元数据服务器检测到新消息后,解析出请求内容,根据所述请求内容中的文件路径名进行第二次哈希值计算,根据第二次的哈希值访问链式哈希索引表,获取元数据信息,并做出相应的逻辑处理,返回请求结果;/n所述自识别远程过程调用方法包括:在所述客户端向所述服务端发送消息时,使用RDMA_WRITE_WITH_IMM原语携带消息内容,并在报文头部存放客户端元数据;在所述服务端返回请求结果时,通过RDMA原语将返回结果直接写回到所述客户端指定的内存区域,所述客户端将轮询地监测用于存放返回结果的内存区域,直到数据成功返回。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611261722.8/,转载请声明来源钻瓜专利网。