[发明专利]一种基于动态Compound RPC的快速状态服务迁移方法和系统在审
| 申请号: | 201811013323.9 | 申请日: | 2018-08-31 |
| 公开(公告)号: | CN109359086A | 公开(公告)日: | 2019-02-19 |
| 发明(设计)人: | 孙丹琦;马建辉;刘健;张强;王一宇;卢森;邵冰清;许鲁 | 申请(专利权)人: | 中国科学院计算技术研究所;天津中科蓝鲸信息技术有限公司 |
| 主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F9/54 |
| 代理公司: | 北京律诚同业知识产权代理有限公司 11006 | 代理人: | 祁建国;梁挥 |
| 地址: | 100080 北*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 迁移 快速状态 元数据 状态一致性 时间开销 状态迁移 初始化 结构体 遍历 写入 发送 返回 服务 恢复 检查 保证 成功 | ||
本发明涉及一种基于动态Compound RPC的快速状态服务迁移方法和系统,包括:获取迁出端中待迁移的元数据子卷;该迁出端初始化一个结构体m,依次遍历该元数据子卷中所有拥有open、lock、delegation、layout状态的文件,将文件中的状态及状态的数目写入m;新建RPC连接,发送m至迁入端,该迁入端对m中的各状态的迁移信息进行逐一恢复,然后新建一个Compound D,将D返回该迁出端;该迁出端通过检查D,确认该文件的状态是否迁移成功。本发明可以保证迁移前后的状态一致性,并降低状态迁移在迁移过程中的时间开销。
技术领域
本发明涉及计算机存储领域,特别涉及分布式文件系统的服务迁移技术。
背景技术
NFS(Network File System)即网络文件系统,它允许网络中的计算机之间通过TCP/IP网络共享资源,本地NFS的客户端应用可以透明地读写位于远端NFS服务器上的文件,就像访问本地文件一样。pNFS是NFSv4的高性能增强,它在保持了NFSv4操作系统和硬件平台独立的同时又提供了对并行文件系统的直接存储访问。pNFS中为了保持文件的一致性,由元数据服务器为访问文件的客户端分配四种状态:open、lock、delegation、layout。open代表文件的一次打开;lock代表对文件中的一个字节加锁;delegation代表可召回的文件授权;layout代表获取文件的布局。pNFS通过服务器对客户端分发这些状态,更好地保持了多客户端的并行访问和一致性处理。
服务器对客户端授权的状态存放在元数据服务器的内存中。当元数据服务器的负载过大时,为了保持元数据客户端正常提供服务,需要对状态进行迁移,即将状态迁移到另一元数据服务器上提供服务。而显然由于客户端的不同和文件的不同,状态数目和种类也不同。以状态为粒度进行迁移时,迁移时间随状态数目的增长显著增大(如图1).
RPC(Remote Procedure Call)即远程过程调用,是一种通过网络从远程计算机程序上请求服务的协议。RPC采用客户机/服务器模式。请求程序就是一个客户机,而服务提供程序就是一个服务器。首先,客户机调用进程发送一个有进程参数的调用信息到服务进程,然后等待应答信息。在服务器端,进程保持睡眠状态直到调用信息到达为止。当一个调用信息到达,服务器获得进程参数,计算结果,发送答复信息,然后等待下一个调用信息,最后,客户端调用进程接收答复信息,获得进程结果,然后调用执行继续进行。
Compound RPC。Compound意为复合的。Compound RPC相对于RPC每次发送多个请求,降低网络交互的时间延迟。Compound过程被定义为一连串的单独操作,在每个Compound中规定了操作的类型,将一系列的操作编码后由一个RPC传给服务器,由服务器进行操作后,将结果按顺序返回,客户端再根据发送时确定的顺序进行解码。一次或一个RPC指的是客户端对服务器的一次RPC调用过程。具体包括“客户端发送给服务器->服务器执行操作并返回结果给客户端->客户端收到回复后处理”的全部过程。
基于上述分析,现有技术目前还存在以下局限:以状态为粒度进行状态迁移时,当状态数目显著增大时,状态迁移时间性能急剧下降;而每个文件的状态数目不固定,无法在Compound中固定操作,现有的Compound RPC机制无法将同一文件的状态聚合在一个RPC中发送。
针对以上考虑,提出一种基于动态Compound RPC的快速状态服务迁移机制。
发明内容
本发明的目的是以pNFS为基础,增加了动态Compound RPC机制,解决了状态迁移时间随状态数目线性增长的问题,提供了一种快速状态服务迁移方法。
具体来说,本发明公开了一种基于动态Compound RPC的快速状态服务迁移方法,其中包括:
步骤1、获取迁出端中待迁移的元数据子卷,该迁出端初始化一个结构体m;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院计算技术研究所;天津中科蓝鲸信息技术有限公司,未经中国科学院计算技术研究所;天津中科蓝鲸信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811013323.9/2.html,转载请声明来源钻瓜专利网。





