[发明专利]文件存储方法、服务端和计算机可读存储介质有效
申请号: | 201710885384.3 | 申请日: | 2017-09-26 |
公开(公告)号: | CN107861686B | 公开(公告)日: | 2021-01-05 |
发明(设计)人: | 卢道和;陈晓峰;杨军;钱碧伟;黎君;胡思文 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国;赵爱蓉 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文件 存储 方法 服务端 计算机 可读 介质 | ||
1.一种文件存储方法,其特征在于,应用于互联网数据中心,所述互联网数据中心包括文件处理系统、分布式文件系统、分布式存储系统,所述文件处理系统包括服务端和客户端,所述文件存储方法包括:
文件处理系统的服务端通过客户端接收发送方上传的文件;
将接收到的文件缓存至临时文件夹中,并在分布式存储系统中记录各个文件的存储位置信息;
对临时文件夹中的各个文件进行合并处理,得到合并后的文件,并将合并后的文件存储到分布式文件系统中,其中,所述服务端扫描所述临时文件夹中的目录,以获取所述目录对应的锁,根据所述锁扫描所述临时文件夹中的各文件,获取预设的组合文件,在扫描的各文件中确定与组合文件合并后容量值小于预设阈值的文件,将确定的文件合并到所述组合文件中,以获取合并后的文件;
基于合并后的文件,更新分布式存储系统中对应的存储位置信息。
2.如权利要求1所述的文件存储方法,其特征在于,所述方法还包括:
在接收到文件查询指令时,确定文件查询指令对应的索引信息;
在分布式文件系统中查找所述索引信息所指向的已合并文件;
对所述已合并文件进行还原,以从已合并文件中还原出所述索引信息对应的文件。
3.如权利要求1所述的文件存储方法,其特征在于,所述将合并后的文件存储到分布式文件系统中的步骤之后,所述方法还包括:
所述服务端基于分布式文件系统中存储的文件,生成文件标识信息及文件哈希信息;
通过所述客户端反馈文件标识信息及文件哈希信息至所述发送方,以供所述发送方将文件标识信息及文件哈希信息传输至接收方;
通过所述客户端接收到所述接收方发送的文件标识信息时,在分布式文件系统中提取所述文件标识信息对应的文件,并反馈至所述接收方,以供所述接收方通过文件哈希信息检验所述文件,并在检验成功时获取所述文件。
4.如权利要求1所述的文件存储方法,其特征在于,所述服务端的个数包括多个,所述文件处理系统的服务端和客户端通过网关连接,文件从客户端上传至服务端的方式包括:网关按照预设的策略,将客户端上传的文件轮询上传至服务端中。
5.如权利要求1所述的文件存储方法,其特征在于,所述基于合并后的文件,更新分布式存储系统中对应的存储位置信息的步骤之后,所述方法还包括:
所述服务端扫描分布式文件系统中的各个文件,以监测各个文件的存储时长;
在有文件的存储时长达到预设时长时,删除所述分布式文件系统中的所述文件,并删除所述分布式存储系统中所述文件的存储位置信息。
6.如权利要求5所述的文件存储方法,其特征在于,所述互联网数据中心还包括分布式应用程序协调服务,所述服务端扫描分布式文件系统中的各个文件,以监测各个文件的存储时长的步骤之前,所述方法还包括:
所述服务端向分布式应用程序协调服务发送删除锁的请求信息;
在获取锁成功时,执行扫描分布式文件系统中的各个文件,以监测各个文件的存储时长的步骤。
7.如权利要求1-6任一项所述的文件存储方法,其特征在于,所述服务端位于主互联网数据中心中,在系统中存在备互联网数据中心的情况下,所述基于合并后的文件,更新分布式存储系统中对应的存储位置信息的步骤之后,所述方法包括:
所述服务端将存储的文件同步到备互联网数据中心所在文件处理系统的服务端中,以供备互联网数据中心所在文件处理系统的服务端执行文件存储操作。
8.一种服务端,其特征在于,所述服务端包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的文件存储程序,所述文件存储程序被所述处理器执行时实现如权利要求1至7中任一项所述的文件存储方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有文件存储程序,所述文件存储程序被处理器执行时实现如权利要求1至7中任一项所述的文件存储方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710885384.3/1.html,转载请声明来源钻瓜专利网。