[发明专利]小文件的存储方法及系统

说明书

技术领域

本发明涉及通信领域，具体地，涉及一种小文件的存储方法及系统。

背景技术

目前，文件存储系统已趋于成熟。申请号201010184752.X公开了一种文件存储方法，该方法通过用户在网页页面上提交文件、并上传至中转服务器，将文件从中转服务器通过远程服务存储到存储服务器。该存储服务器没有独立的单做用作全局管理调度的管理服务器，难易实现全面的全局调度。而且，客户端(Client)分别与主存储器、隶属存储器均建立了短连接，同时完成存储和备份。但是，由于存储器的存储用磁盘没有存储区分，这导致了访问的IO性能较差，从而可能导致寻址效率低。

发明内容

本发明实施例的主要目的在于提供一种小文件的存储方法及系统，以解决现有技术中的存储器由于存储用磁盘没有存储区分而导致的访问IO性能较差、进而导致了寻址效率低的问题。

为了实现上述目的，本发明实施例提供一种小文件的存储方法，该方法包括：管理系统接收来自客户端的存储请求；所述管理系统根据接收到的多个存储器的负载信息选择分布性最佳的存储器，其中，每一存储器包括至少一个外部磁盘存储器，所述的负载信息包括磁盘剩余空间、CPU负载信息和磁盘IO信息；所述管理系统获取所述最佳存储器的IP地址并发送给所述客户端；所述客户端与所述最佳存储器建立连接；所述最佳存储器接收并存储来自所述客户端的需要存储的数据。

优选地，所述每一存储器包括若干外部磁盘存储器，其中，所述若干外部磁盘存储器之间采用轮询磁盘剩余空间的机制确定本地负载均衡。

所述管理系统根据接收到的多个存储器的负载信息选择分布性最佳的存储器包括：所述管理系统分别确定每个存储器的负载信息的权重；所述管理系统根据所述每个存储器的负载信息的权重确定各存储器的负载情况；所述管理系统将负载情况所述分布性最佳的存储器选择为最佳存储器。

具体地，通过如下方式确定存储器的负载情况：根据预定规则对所述负载信息中的每项信息设置权重；根据所述每项信息设置的权重确定每个存储器的负载信息权重。

通过如下公式确定所述存储器的负载情况：

存储器的负载情况＝(磁盘剩余空间)×a+(CPU负载信息)×b+(磁盘IO信息)×c，其中，a为所述磁盘剩余空间的权重，b为所述CPU负载信息的权重；c为所述磁盘IO信息的权重。

最佳存储器接收并存储来自所述客户端的需要存储的数据包括：所述最佳存储器接收所述客户端的需要存储的数据；所述最佳存储器存储所述需要存储的数据至相应的磁盘存储器。

本发明实施例还提供一种小文件的存储系统，该系统包括：管理系统、客户端、以及包括多个存储器，其中，每个存储器包括至少一个分区的外部磁盘存储器，所述的管理系统包括：存储请求接收单元，用于接收来自所述客户端的存储请求；最佳存储器选择单元，用于根据接收到的多个存储器的负载信息选择分布性最佳的存储器，其中，所述的负载信息包括磁盘剩余空间、CPU负载信息和磁盘IO信息；IP地址获取单元，用于获取所述最佳存储器的IP地址；IP地址发送单元，用于将获取的所述最佳存储器的IP地址发送给所述客户端；所述客户端与所述最佳存储器建立连接，所述最佳存储器接收并存储来自所述客户端的需要存储的数据。

优选地，所述每一存储器包括若干外部磁盘存储器，其中，所述若干外部磁盘存储器之间采用轮询磁盘剩余空间的机制确定本地负载均衡。

其中，最佳存储器选择单元包括：负载情况确定模块，用于根据接收到的多个存储器的负载信息确定各存储器的负载情况；最佳存储器选择模块，用于将负载情况分布性最佳的存储器选择为最佳存储器。

上述的负载情况确定模块包括：权重设置子模块，用于根据预定规则对所述负载信息中的每项信息设置权重；负载情况确定子模块，用于根据所述每项信息设置的权重确定每个存储器的负载信息权重。

具体地，所述的负载情况确定模块通过如下公式确定所述存储器的负载情况：存储器的负载情况＝(磁盘剩余空间)×a+(CPU负载信息)×b+(磁盘IO信息)×c，其中，a为所述磁盘剩余空间的权重，b为所述CPU负载信息的权重；c为所述磁盘IO信息的权重。

所述存储器包括：数据接收单元，用于接收所述客户端的需要存储的数据；数据存储单元，用于存储所述需要存储的数据至相应的磁盘存储器。

借助于上述技术方案至少之一，通过对存储器进行分区、以及根据负载信息选择分布性最佳存储器进行存储数据，可以使得数据可以均衡的分布在每块磁盘上，提高IO性能，从而提高系统的寻址效率，提高数据的读写操作速度。

附图说明