[发明专利]一种小文件存储方法、装置、设备及介质有效
申请号: | 201911382298.6 | 申请日: | 2019-12-27 |
公开(公告)号: | CN111176574B | 公开(公告)日: | 2022-03-22 |
发明(设计)人: | 梁珂铭;胡永刚 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 巴翠昆 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文件 存储 方法 装置 设备 介质 | ||
1.一种小文件存储方法,其特征在于,包括:
利用小文件对应的桶名和文件名生成对应的文件标识;
利用所述文件标识将不同的所述小文件对应的聚合信息添加至不同的元数据表;其中,所述聚合信息包括所述文件标识以及对应的大文件的名称、所述小文件在对应的所述大文件中的偏移位置,并且,所述大文件为所述小文件对应的聚合文件;
当获取到用户终端发送的针对所述小文件的读请求,则查找对应的所述元数据表,以及从查找到的所述元数据表中查询对应的所述聚合信息,然后利用所述聚合信息读取对应的所述大文件中的所述小文件的数据;
所述利用所述文件标识将不同的所述小文件对应的聚合信息添加至不同的元数据表,包括:
针对任一所述小文件对应的聚合信息,查找是否存在数据表名与所述文件标识对应的所述元数据表;
若存在,则将当前小文件对应的聚合信息添加至对应的所述元数据表;
若不存在,则将当前小文件对应的聚合信息添加至空的所述元数据表,并利用所述文件标识生成该元数据表的数据表名;
所述当获取到用户终端发送的针对所述小文件的读请求,则查找对应的所述元数据表,以及从查找到的所述元数据表中查询对应的所述聚合信息,包括:
将所述读请求中的桶名和文件名生成对应的目标字符串;
对所述目标字符串进行哈希运算,得到对应的目标文件标识;
提取所述目标文件标识的目标首字符;
利用所述目标首字符和所述读请求中的桶名查找对应的所述元数据表;
从查找到的所述元数据表中查询对应的所述聚合信息。
2.根据权利要求1所述的小文件存储方法,其特征在于,所述将当前小文件对应的聚合信息添加至空的所述元数据表,包括:
将当前小文件对应的聚合信息添加至预先创建的空的所述元数据表;
或,实时创建空的所述元数据表,然后将当前小文件对应的聚合信息添加至该元数据表。
3.根据权利要求1所述的小文件存储方法,其特征在于,所述利用小文件对应的桶名和文件名生成对应的文件标识,包括:
将小文件对应的桶名和文件名生成对应的字符串;
对所述字符串进行哈希运算,得到对应的所述文件标识。
4.根据权利要求3所述的小文件存储方法,其特征在于,所述利用所述文件标识生成该元数据表的数据表名,包括:
读取所述文件标识的首字符;
利用所述首字符和对应的所述桶名生成所述数据表名。
5.根据权利要求1至4任一项所述的小文件存储方法,其特征在于,所述利用小文件对应的桶名和文件名生成对应的文件标识之前,还包括:
获取文件聚合指令,以触发所述利用小文件对应的桶名和文件名生成对应的文件标识的步骤。
6.一种小文件存储装置,其特征在于,包括:
文件标识生成模块,用于利用小文件对应的桶名和文件名生成对应的文件标识;
聚合信息添加模块,用于利用所述文件标识将不同的所述小文件对应的聚合信息添加至不同的元数据表;其中,所述聚合信息包括所述文件标识以及对应的大文件的名称、所述小文件在对应的所述大文件中的偏移位置,并且,所述大文件为所述小文件对应的聚合文件;
文件数据读取模块,用于当获取到用户终端发送的针对所述小文件的读请求,则查找对应的所述元数据表,以及从查找到的所述元数据表中查询对应的所述聚合信息,然后利用所述聚合信息读取对应的所述大文件中的所述小文件的数据;
其中,聚合信息添加模块,具体用于针对任一所述小文件对应的聚合信息,查找是否存在数据表名与所述文件标识对应的所述元数据表;若存在,则将当前小文件对应的聚合信息添加至对应的所述元数据表;若不存在,则将当前小文件对应的聚合信息添加至空的所述元数据表,并利用所述文件标识生成该元数据表的数据表名;
所述文件数据读取模块,具体用于将所述读请求中的桶名和文件名生成对应的目标字符串;对所述目标字符串进行哈希运算,得到对应的目标文件标识;提取所述目标文件标识的目标首字符;利用所述目标首字符和所述读请求中的桶名查找对应的所述元数据表;从查找到的所述元数据表中查询对应的所述聚合信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911382298.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种复合型微生态制剂的制备方法
- 下一篇:一种干洗摩擦机