[发明专利]元数据处理方法、装置、设备及介质在审
| 申请号: | 202210936052.4 | 申请日: | 2022-08-05 |
| 公开(公告)号: | CN115481096A | 公开(公告)日: | 2022-12-16 |
| 发明(设计)人: | 方然;吴淦 | 申请(专利权)人: | 深圳云创天地信息技术有限公司 |
| 主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/172;G06F16/17;G06F16/14;G06F16/13 |
| 代理公司: | 上海华诚知识产权代理有限公司 31300 | 代理人: | 徐乐乐 |
| 地址: | 518066 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据处理 方法 装置 设备 介质 | ||
本申请公开了一种元数据处理方法、装置、设备和介质,应用于分布式文件系统,方法包括:接受文件操作请求;响应于所述文件操作请求,解析元数据操作;根据所述元数据操作的类型和文件类型对元数据处理,其中,元数据基于键值对存储,键key包括父文件的唯一编号和子文件的文件名,值value为子文件的文件信息。本申请的方法能够提高元数据处理的效率并能在异常情况下准确恢复数据。
技术领域
本发明涉及计算机技术领域,特别涉及一种元数据处理方法、装置、设备及介质。
背景技术
在常见的分布式文件系统架构中,文件数据与元数据分开存储。在分布式文件系统的应用中,用户会频繁进行大量的文件读写、文件查询、目录查询等操作,会产生大量的元数据访问和修改记录。
在相关技术中,为了对同一文件进行反复操作,利用相对固定的索引来直接定位文件以提高文件信息进行查改效率。但是这些方法中的操作过程较为繁琐,并且在异常情况下会不易恢复数据。
发明内容
本申请提供的一种元数据处理方法、装置、设备和介质,能够提高元数据处理的效率并能在异常情况下准确恢复数据。
本申请的第一方面公开了一种元数据处理方法,应用于分布式文件系统,所述方法包括:接受文件操作请求;响应于所述文件操作请求,解析元数据操作;根据所述元数据操作的类型和文件类型对元数据处理,其中,元数据基于键值对存储,键key包括父文件的唯一编号和子文件的文件名,值value为子文件的文件信息。
在上述第一方面的一种可能的实现中,当所述子文件为文件夹时,根据所述子文件的唯一编号构成第二键key;根据所述父文件的唯一编号和所述子文件的文件名构成第二值value。
在上述第一方面的一种可能的实现中,当所述子文件为硬链接文件时,所述值value中包括硬链接标记;并且根据所述子文件的唯一编号构成第三键key,根据所述硬链接文件的文件信息构成第三值value。
在上述第一方面的一种可能的实现中,当所述子文件为软链接文件时,所述值value包括软链接路径信息。
在上述第一方面的一种可能的实现中,当所述元数据操作的类型为重命名文件时,所述方法包括,先将所述子文件的记录改为硬链接形式;再插入重命名后的子文件记录;最后删除所述子文件。
在上述第一方面的一种可能的实现中,当所述元数据操作的类型为创建文件夹时,所述方法包括,在构成所述值value之后构成所述键key。
在上述第一方面的一种可能的实现中,当所述元数据操作的类型为创建硬链接文件时,所述方法包括,先修改源文件和目标文件中的硬链接记录;再修改所述源文件的kv记录;最后插入所述目标文件的kv记录。
在上述第一方面的一种可能的实现中,所述方法包括,将数据写入元数据缓存,并根据写入文件的长度将所述元数据缓存中的数据更新至kv记录。
本申请的第二方面公开了一种分布式文件系统的元数据管理装置,所述装置包括:文件服务模块,用于接收来自客户端的文件操作请求并解析元数据操作;元数据服务模块,用于根据所述元数据操作的类型和文件类型对元数据处理,其中,元数据基于键值对存储,键key包括父文件的唯一编号和子文件的文件名,值value为子文件的文件信息。
在上述第二方面的一种可能的实现中,所述文件服务模块还包括元数据缓存模块,用于将数据写入元数据缓存,并根据写入文件的长度将所述元数据缓存中的数据更新至kv记录。
本申请的第三方面公开了一种电子设备,所述设备包括存储有计算机可执行指令的存储器和处理器;当所述指令被所述处理器执行时,使得所述设备实施上述第一方面实施例的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳云创天地信息技术有限公司,未经深圳云创天地信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210936052.4/2.html,转载请声明来源钻瓜专利网。





