[发明专利]一种获取文件数据的方法、系统和应用服务器

说明书

本发明公开了一种获取文件数据的方法、系统和应用服务器。其中，应用服务器根据获取文件数据的请求，查找是否本地及相邻应用服务器集群中的其它服务器已缓存所述文件数据；如果本地已缓存，则直接读取所述文件数据；如果相邻应用服务器已缓存，则通过访问相邻服务器缓存获取文件数据。本发明减少了对云存储系统的频繁读取操作，减轻了对云存储系统中各个服务器以及应用侧到云存储之间网络的压力。

技术领域

本发明属于云存储和分布式技术领域，具体涉及一种获取文件数据的方法、系统和应用服务器。

背景技术

云存储中保存的文件数是海量的，对于海量文件的快速查询和获取，是云存储系统应用中面临的一项重大挑战。

为了实现数据的快速查询和获取，通常的云存储系统会使用缓存技术来加速文件的访问和定位。

任何文件系统中的数据分为数据和元数据。数据是指普通文件中的实际数据，而元数据指用来描述一个文件的特征的系统数据，诸如访问权限、文件拥有者以及文件数据块的分布信息等等。在集群文件系统中，分布信息包括文件在磁盘上的位置以及磁盘在集群中的位置。用户需要操作一个文件必须首先得到它的元数据，才能定位到文件的位置并且得到文件的内容或相关属性。

因此，应用侧进行文件的查询，先要到云存储所在的元数据服务器查询文件所在的位置信息，也就是文件的元数据，由于在云存储中文件是按照对象进行存储的，所以一个文件可能会返回一个或者多个的对象元数据信息；在得到对象的元数据信息后，应用侧的客户端会向对象所在的对象服务器发起读取请求，并得到对象数据。

这种方式下，对于频繁进行查询的系统来讲，尤其是大数据量的数据访问，由于应用侧需要对云存储所在的元数据服务器和对象服务器的缓存进行频繁的远程调用和数据传输，会对元数据服务器和对象服务器产生压力，影响应用侧数据的访问。

在云存储系统中，如何进一步优化文件元数据和文件数据的访问和使用，提升云存储对外服务的性能，是目前云存储系统应用中迫切需要解决的问题。

发明内容

本发明要解决的技术问题是对云存储系统的频繁读取操作，增加了对云存储系统中各个服务器的压力。

根据本发明一方面，提出一种获取文件数据的应用服务器，包括：

云存储客户端，用于接收应用程序获取文件数据的请求，并将所述请求转发给本地缓存接口，以及从缓存存取模块获取文件数据，并返回给所述应用程序；

本地缓存接口，用于接收所述云存储客户端发送的所述获取文件数据的请求，并转发给缓存控制模块；

缓存控制模块，用于接收所述本地缓存接口发送的所述获取文件数据的请求，并查找是否本地已缓存所述文件数据，如果已缓存，则通知缓存存取模块读取所述文件数据；

缓存存取模块，用于根据所述缓存控制模块的通知，读取所述文件数据，并返回给所述云存储客户端。

进一步，所述缓存控制模块用于在本地未缓存所述文件数据时，根据从管理平台获取的列表，查找是否在列表中的其他应用服务器中缓存所述文件数据，如果其他应用服务器已缓存，则向其发送所述获取文件数据的请求；

所述缓存存取模块用于接收其他应用服务器返回的所述文件数据，并返回给所述云存储客户端。

进一步，所述本地缓存接口用于接收其他服务器的本地缓存接口发送的获取文件数据的请求，并转发给所述缓存控制模块；

所述缓存控制模块用于接收所述本地缓存接口发送的获取文件数据的请求，并通知缓存存取模块读取该文件数据；

所述缓存存取模块用于根据所述缓存控制模块的通知，读取该文件数据，并返回给请求获取该文件数据的其他服务器的缓存存取模块；