[发明专利]文件存储方法、服务端和计算机可读存储介质有效
申请号: | 201710885384.3 | 申请日: | 2017-09-26 |
公开(公告)号: | CN107861686B | 公开(公告)日: | 2021-01-05 |
发明(设计)人: | 卢道和;陈晓峰;杨军;钱碧伟;黎君;胡思文 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡海国;赵爱蓉 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文件 存储 方法 服务端 计算机 可读 介质 | ||
本发明公开了一种文件存储方法,应用于互联网数据中心,所述互联网数据中心包括文件处理系统、分布式文件系统、分布式存储系统,文件处理系统包括服务端和客户端,该方法包括:服务端通过客户端接收发送方上传的文件;将接收到的文件缓存至临时文件夹中,并在分布式存储系统中记录各个文件的存储位置信息;对临时文件夹中的各个文件进行合并处理,得到合并后的文件,并将合并后的文件存储到分布式文件系统中;基于合并后的文件,更新分布式存储系统中对应的存储位置信息。本发明还公开了一种服务端和计算机可读存储介质。本发明通过文件的合并可以提高数据存储的数量,并通过分布式文件系统存储文件,使得可存储的文件数量更多。
技术领域
本发明涉及应用技术领域,尤其涉及一种文件存储方法、服务端和计算机可读存储介质。
背景技术
传统的海量文件存储是采用专门的文件服务器中如NAS(Network AttachedStorage,网络附属存储)进行存储,NAS被定义为一种特殊的专用数据存储服务器,包括存储器件(例如磁盘阵列、CD/DVD驱动器、磁带驱动器或可移动的存储介质)和内嵌系统软件,可提供跨平台文件共享功能。NAS通常在一个LAN(Local Area Network,局域网)上占有自己的节点,无需应用服务器的干预,允许用户在网络上存取数据。
现有的文件存储架构,多台前端服务器通过专用存储网络共享后端NAS设备,后端NAS设备上的存储空间通过CIFS(Commom Internet File System,通用网络文件系统)、NFS(Network File System,网络文件系统)协议共享给前端主机,可同时对同一目录或文件进行并发读写。文件系统位于后端存储系统,连接采用标准以太网链路和TCP(TransmissionControl Protocol,传输控制协议)/IP(Internet Protocol,因特网互联协议)协议,可实现多系统之间的文件存储共享。然而,随着时间的推移以及业务的发展,数据规模越来越大,NAS设备的存储容量有限,传统文件存储模式已经很难应对数据的井喷式发展,也就是说,在数据量越来越大的情况下,现有的文件存储方式,存储数据的容量很难满足需求。
发明内容
本发明的主要目的在于提供一种文件存储方法、服务端和计算机可读存储介质,旨在解决现有的文件存储方式,在数据容量增大的情况下,难以满足存储需求的技术问题。
为实现上述目的,本发明提供一种文件存储方法,应用于互联网数据中心,所述互联网数据中心包括文件处理系统、分布式文件系统、分布式存储系统,所述文件处理系统包括服务端和客户端,所述文件存储方法包括:
文件处理系统的服务端通过客户端接收发送方上传的文件;
将接收到的文件缓存至临时文件夹中,并在分布式存储系统中记录各个文件的存储位置信息;
对临时文件夹中的各个文件进行合并处理,得到合并后的文件,并将合并后的文件存储到分布式文件系统中;
基于合并后的文件,更新分布式存储系统中对应的存储位置信息。
可选地,所述对临时文件夹中的各个文件进行合并处理,得到合并后的文件的步骤包括:
所述服务端扫描所述临时文件夹中的各个文件;
获取组合文件,并在扫描的文件中确定与所述组合文件合并后的容量值小于预设阀值的文件,将确定的文件合并到所述组合文件中。
可选地,所述方法还包括:
在接收到文件查询指令时,确定文件查询指令对应的索引信息;
在分布式文件系统中查找所述索引信息所指向的已合并文件;
对所述已合并文件进行还原,以从已合并文件中还原出所述索引信息对应的文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710885384.3/2.html,转载请声明来源钻瓜专利网。