[发明专利]基于分布式文件系统的文件数据迁移的方法及装置有效
申请号: | 201710892016.1 | 申请日: | 2017-09-27 |
公开(公告)号: | CN107643880B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 王帅阳 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 分布式 文件系统 文件 数据 迁移 方法 装置 | ||
本发明公开了一种基于分布式文件系统的文件数据迁移的方法,该方法包括:记录待迁移目标文件的最后修改时间;从原存储池中读取所述目标文件中的数据并写入目标存储池;判断所述目标文件的最后修改时间是否发生变化;若发生变化,终止所述数据的迁移,并将已写入目标存储池的所述数据删除;若未发生变化,判断移动偏移量是否小于所述目标文件的大小;若所述移动偏移量不小于所述目标文件的大小,则完成所述数据的迁移。该方法是文件级别的数据迁移方法,可以根据用户的指定规则将文件存放在不同性能的存储设备上,满足了用户的需求。本发明还公开了一种基于分布式文件系统的文件数据迁移的装置、设备及计算机可读存储介质,均具有上述技术效果。
技术领域
本发明涉及数据迁移领域,特别涉及一种基于分布式文件系统的文件数据迁移的方法、装置、设备及计算机可读存储介质。
背景技术
对象与文件类似,二者都包含有数据。对于分布式存储系统,目前存在的数据迁移方式是以对象为级别的自动迁移。这样的数据迁移方式无法满足用户对数据迁移的需求,因为对于文件系统而言,用户操作的对象是文件,用户希望可以按照指定规则主动地将文件存放于不同的存储池中。
因此,如何实现文件级别的数据迁移以满足用户需求是本领域技术人员亟待解决的问题。
发明内容
本发明的目的是提供一种基于分布式文件系统的文件数据迁移的方法,该方法是文件级别的数据迁移方法,可以根据用户指定的规则将文件存放在不同性能的存储池设备上,满足了用户的需求。
为解决上述技术问题,本发明提供一种基于分布式文件系统的文件数据迁移的方法,所述方法包括:
根据数据迁移触发指令,确定待迁移的目标文件;
记录所述目标文件的最后修改时间;
从原存储池中读取所述目标文件中的数据并写入目标存储池;
判断所述目标文件的最后修改时间是否发生变化;
若发生变化,则终止所述数据的迁移,并将已写入目标存储池的所述数据删除;
若未发生变化,则判断移动偏移量是否小于所述目标文件的大小;
若所述移动偏移量不小于所述目标文件的大小,则完成所述数据的迁移。
优选的,所述从原存储池中读取所述目标文件中的数据并写入目标存储池包括:
以预设值为单位循环从原存储池中读取所述数据并写入所述目标存储池。
优选的,所述完成所述数据的迁移后还包括:
获取读缓存权限;
若获取成功,则判断所述目标文件的最后修改时间是否发生变化;
若未发生变化,则向元数据服务器发送更新元数据的消息。
优选的,所述向元数据服务器发送更新元数据的消息后还包括:
收取所述元数据服务器关于更新元数据消息的回应;
若收取成功,则更改本地存储池的相关元数据,删除本地原存储池中的所述数据,释放所述读缓存权限。
优选的,所述方法还包括:
其他读写所述目标文件的客户端收取所述元数据服务器发送的元数据变更消息;
根据所述元数据变更消息,判断所述数据的存储池是否发生变化;
若发生变化,则更改本地存储池的相关元数据,删除本地原存储池中的所述数据。
本发明还提供了一种基于分布式文件系统的文件数据迁移的装置,所述装置包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710892016.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:种子罐
- 下一篇:一种用于红糖冷却装置