[发明专利]一种文件系统架构的性能调整方法和装置

说明书

本发明公开了一种文件系统架构的性能调整方法和装置，该方法包括：确定文件系统架构中客户端、对象存储服务器、和存储控制器之间的多个互联网络带宽；确定文件系统架构的整体网络架构和文件系统架构的最大传输带宽；测试单个对象存储目标的读写性能以存储节点输入输出处理能力；判断最大传输带宽与存储节点输入输出处理能力是否匹配以相应增减存储阵列以调整对象存储目标的数量；执行性能基准测试以确定文件系统架构的输入输出读写性能；判断最大传输带宽与输入输出读写性能是否匹配以相应调整对象存储服务器的数量或存储阵列的数量。本发明能够根据网络异构和多网络并存的实际情况来重新评估和调整以优化文件系统架构的整体性能。

技术领域

本发明涉及数据存储领域，更具体地，特别是指一种文件系统架构的性能调整方法和装置。

背景技术

随着信息化技术的飞速发展，信息系统在各种行业的关键业务中扮演着越来越重要的角色。高性能计算(HPC)在20世纪60年代初首次证明了它对政府和学术研究人员的转型价值。在上世纪70年代末，HPC开始渗透一级商业公司，并迅速成为推动创新、产品设计和复杂业务流程的变革者。HPC使用的并行文件系统架构Lustre是面向集群的存储架构，它是基于Linux平台的开源集群(并行)文件系统提供与POSIX兼容的文件系统接口。

Lustre高性能网络设计是基于在服务器、存储设备以及网络技术都比较更新的状态下的设计，但是在很多实际应用当中，并不是所有的服务器、存储设备都支持高速网络。在企业网络、设备利旧使用的场景下，Lustre并行文件系统实际应用中会出现多种网络并存的现象，及网络异构。这使得业务网络(即数据传输网络)中数据传输通道带宽不一致，影响系统整体性能输出。另外Lustre系统性能评估和调优方法，并没有考虑到Lustre文件系统在异构网络下，业务输入输出(IO)在模块间处理流程会有所变化，由于存储控制器并未连接到IO网络中，客户端根据文件布局信息Layout EA也无法直接从OST访问数据，而是要经过IO节点OSS的转发。因此，在网络不成为性能带宽瓶颈的情况下，扩展存储控制器连接的存储阵列，系统总体带宽能力并得不到提高，也就是不能达到节点间最小网络带宽值。

针对现有技术中并行文件系统架构中整体性能输出差、无视网络异构问题影响带宽的问题，目前尚无有效的解决方案。

发明内容

有鉴于此，本发明实施例的目的在于提出一种文件系统架构的性能调整方法和装置，能够根据网络异构和多网络并存的实际情况来重新评估和调整以优化文件系统架构的整体性能，以最大程度的获得接近理论值的输出带宽。

基于上述目的，本发明实施例的第一方面提供了一种文件系统架构的性能调整方法，包括执行以下步骤：

确定文件系统架构中客户端、对象存储服务器、和存储控制器之间分别两两互联的多个互联网络带宽；

确定文件系统架构的整体网络架构，并根据多个互联网络带宽和整体网络架构确定文件系统架构的最大传输带宽；

通过文件系统架构的接口测试单个对象存储目标的读写性能，以计算文件系统架构的存储节点输入输出处理能力；

判断最大传输带宽与存储节点输入输出处理能力是否匹配，并响应于二者不匹配而增减存储阵列以调整对象存储目标的数量从而使二者匹配；

在客户端对文件系统架构执行性能基准测试，以确定文件系统架构的输入输出读写性能；

判断最大传输带宽与输入输出读写性能是否匹配，并响应于二者不匹配而根据整体网络架构来调整对象存储服务器的数量或存储阵列的数量从而使二者匹配。

在一些实施方式中，确定文件系统架构的整体网络架构包括：确定文件系统架构为异构网络或非异构网络；