[发明专利]应用于分布式文件系统的日志重演方法、装置及终端有效
申请号: | 201710109052.6 | 申请日: | 2017-02-27 |
公开(公告)号: | CN106919679B | 公开(公告)日: | 2019-12-13 |
发明(设计)人: | 张震;周应超 | 申请(专利权)人: | 北京小米移动软件有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/18 |
代理公司: | 11205 北京同立钧成知识产权代理有限公司 | 代理人: | 杨文娟;刘芳 |
地址: | 100085 北京市海淀区清河*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 应用于 分布式 文件系统 日志 重演 方法 装置 终端 | ||
1.一种应用于分布式文件系统的日志重演方法,其特征在于,包括:
根据编辑日志中各记录的文件标识,将各记录分为至少一类记录,其中,每一类记录为具有依赖关系的记录;
根据划分出的记录的类数,确定用于日志重演的线程数量;
采用确定出的线程数量的各线程,对与各线程一一对应的各类记录进行日志重演;
其中,所述根据编辑日志中各记录的文件标识,将各记录分为至少一类记录,包括:
根据所述编辑日志中的各记录,确定所述编辑日志中的各同步点;
将相邻的同步点之间的各记录,确定为同时处理的各记录;
根据确定为同时处理的各记录的文件标识,将确定为同时处理的各记录分为至少一类记录。
2.根据权利要求1所述的方法,其特征在于,所述根据划分出的记录的类数,确定用于日志重演的线程数量,包括:
对各相邻的同步点之间的各类记录,确定各相邻的同步点之间的线程数量。
3.根据权利要求2所述的方法,其特征在于,所述采用确定出的线程数量的各线程,对与各线程一一对应的各类记录进行日志重演,包括:
重复以下过程,直至对所述编辑日志中的所有记录完成日志重演:
采用相邻的同步点之间的线程数量的线程,对于各线程一一对应的各类记录进行日志重演;
对同步点进行日志重演。
4.根据权利要求1所述的方法,其特征在于,所述同步点为所述编辑日志中的rename操作。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述文件标识为文件路径前缀。
6.一种应用于分布式文件系统的日志重演装置,其特征在于,包括:
分类模块,被配置为根据编辑日志中各记录的文件标识,将各记录分为至少一类记录,其中,每一类记录为具有依赖关系的记录;
确定模块,被配置为根据划分出的记录的类数,确定用于日志重演的线程数量;
重演模块,被配置为采用确定出的线程数量的各线程,对与各线程一一对应的各类记录进行日志重演;
其中,所述分类模块,被具体配置为:
根据所述编辑日志中的各记录,确定所述编辑日志中的各同步点;
将相邻的同步点之间的各记录,确定为同时处理的各记录;
根据确定为同时处理的各记录的文件标识,将确定为同时处理的各记录分为至少一类记录。
7.根据权利要求6所述的装置,其特征在于,所述确定模块,被具体配置为:
对各相邻的同步点之间的各类记录,确定各相邻的同步点之间的线程数量。
8.根据权利要求7所述的装置,其特征在于,所述重演模块,被具体配置为:
重复以下过程,直至对所述编辑日志中的所有记录完成日志重演:
采用相邻的同步点之间的线程数量的线程,对于各线程一一对应的各类记录进行日志重演;
对同步点进行日志重演。
9.根据权利要求6所述的装置,其特征在于,所述同步点为所述编辑日志中的rename操作。
10.根据权利要求6-9任一项所述的装置,其特征在于,所述文件标识为文件路径前缀。
11.一种终端,其特征在于,包括:
处理器,以及用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:根据编辑日志中各记录的文件标识,将各记录分为至少一类记录,其中,每一类记录为具有依赖关系的记录;根据划分出的记录的类数,确定用于日志重演的线程数量;采用确定出的线程数量的各线程,对与各线程一一对应的各类记录进行日志重演;
其中,所述根据编辑日志中各记录的文件标识,将各记录分为至少一类记录,包括:
根据所述编辑日志中的各记录,确定所述编辑日志中的各同步点;
将相邻的同步点之间的各记录,确定为同时处理的各记录;
根据确定为同时处理的各记录的文件标识,将确定为同时处理的各记录分为至少一类记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京小米移动软件有限公司,未经北京小米移动软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710109052.6/1.html,转载请声明来源钻瓜专利网。