[发明专利]一种实现文件分布式传输的方法

说明书

技术领域

本发明涉及计算机存储分布式文件领域，具体涉及一种实现文件分布式传输的方法。

背景技术

目前分布式文件系统被各厂家广泛使用,但都是通过软件的文件系统来实现的,这种系统一般仅适用于高端集群产品,所以在成本方面都比较贵,无法在满足低端需求.但就目前来看,低端存储市场仍然占据存储市场的半壁江山,而且此类用户由于前期已经有了一定存储设备投入,但随着用户业务的不断增长,他们也慢慢开始有了分布式文件系统的需求,但让他们重新上一套集群分布式文件系统是不可能的,所以这类客户对此类产品的需求还是非常旺盛的,但苦于架构和成本的关系无法实现.本发明就提供了一种在低端存储产品中实现分布式文件系统的办法。

发明内容

本发明的目的是提供一种实现文件分布式传输的方法。

本发明的目的是按以下方式实现的，系统包括1）虚拟地址模块；2）负载均衡模块；3）地址转换模块，其中：

1）虚拟地址模块:根据后端连接的服务接口类型和数量,虚拟出相同类型和数量的MAC地址或SAS地址；

2）负载均衡模块:对于客户的访问数据，将虚拟地址和后端真实服务器地址进行配对，并将数据投向空闲的目标服务器；

3）地址转换模块：对于到达目标服务器的数据，将虚拟地址释放从而完成传输；

传输步骤如下：

1）首先由客户段发起大量并发访问数据,先传送到主机,主机中的虚拟地址模块,根据后端服务器接口的类型和数量,虚拟出相同接口类型和数量的地址，然后数据传送到下一级负载均衡模块；

 2）负载均衡模块根据虚拟地址的释放情况来判断后端接口的负载情况,从而将虚拟地址和需要投放的服务器地址绑定,从而实现数据定向投放,实现分布式传输，之所以要将虚拟地址和真实的服务器地址绑定，就是为了能够对服务器地址进行确定，从而顺利投放数据，单纯的虚拟地址是没有任何意义的和传输价值的，也就是如果一个虚拟地址绑定了一个物理地址，说明马上就会往那个地址上传输数据，而如果有空闲的虚拟地址和物理地址未绑定，说明该物理地址对应服务器是空闲的；

 3）在数据传输到服务器端后,地址转换模块会将虚拟地址进行拨离释放,从而使传输线路再次空闲下来准备下次传输，这就实现了一个简单的分布式传输，这样在下次传输的时候，虚拟地址再次绑定新的空闲物理地址进行传输。

虚拟地址管理模块用于生成和后端服务器同等数量的虚拟地址,然后存放在负载均衡模块,当有数据到达后,将用虚拟地址和数据进行绑定,然后向后端服务器投放,这时候传输的数据就会占用这个虚拟地址,而又由于虚拟地址和后端服务器是一一对应的,所以虚拟地址被占用,既是后端服务器占用,只有当数据传输结束后,这个虚拟地址被释放回负载均衡模块,那么就证明这个服务器已经空闲,继续进行下一个数据的传输。

本发明的有益效果是：本发明仅仅是利用3个模块,就实现了一个高效的负载均衡系统;这比利用高级分布式文件系统来实现的集群,成本要低廉的多。本发明不仅仅适用于分布式文件的传输,还可以扩展到块级文件的处理,通过分布式传输来实现数据存储负载均衡。

 附图说明

图１是系统结构示意图；

图２是传输步骤流程图。

具体实施方式

 参照说明书附图对本发明的方法作以下详细地说明。

结构框图:即上图中系统包含的模块如下：

1）虚拟地址模块:根据后端连接的服务的接口类型和数量,来虚拟出相同类型和数量的MAC地址、SAS地址等；

2）负载均衡模块:对于客户的访问数据，将虚拟地址和后端真实服务器地址进行配对，并将数据投向空闲的目标服务器；

3）地址转换模块：对于到达目标服务器的数据，将虚拟地址释放，从而完成传输；

传输步骤如下：

    如附图所示,首先由客户段发起大量并发访问数据,会先到达主机,主机中虚拟地址模块,会事先根据后端服务器接口的类型和数量,虚拟出相同接口类型和数量的地址(之所以要选择虚拟地址,就是因为虚拟地址无需和真实服务器绑定,每次传输可以根据负载情况,随机绑定一个地址传输).然后数据会到达下一级负载均衡模块。