[发明专利]一种用于分布式文件系统的文件读写方法

摘要

本发明公开了一种用于分布式文件系统的文件读写方法，文件读采用客户端‑元数据服务器‑数据服务器‑客户端的文件读取IO路径，文件写时客户端获取需要进行文件写的待写文件数量，如果待写文件数量超过预设阈值，则判定高性能计算场景，且针对高性能计算场景下大量的线程同时写文件采用“先写数据后创建元数据”的策略以降低元数据服务器上的突发负载；否则，针对每一个待写的目标文件采用客户端‑数据服务器‑元数据服务器‑客户端的文件写入IO路径。本发明具有文件读写速度快，效率高，减少了客户端和元数据服务器交互的次数，降低了通信开销的优点。

主权项

一种用于分布式文件系统的文件读写方法，其特征在于，文件读的实施步骤包括：A1）客户端向分布式文件系统的元数据服务器通信发送读取文件的请求；A2）元数据服务器在收到客户端的请求后向客户端返回通信查询元数据信息、且向读取文件的文件块所在的数据服务器发送客户端请求信息及通信地址，客户端根据元数据服务器返回信息找到读取文件的文件块所在的数据服务器；A3）数据服务器收到客户端请求信息及通信地址后，和客户端建立连接并开始向客户端发送读取文件的文件块数据；A4）客户端以文件块为单位接收数据，先在本地缓存、然后写入目标文件，将后面的文件块和前面的文件块合并成最终所需要的文件，完成数据读取。