[发明专利]一种分布式文件系统的并行性能评估方法和装置在审
申请号: | 202110835163.1 | 申请日: | 2021-07-23 |
公开(公告)号: | CN113626299A | 公开(公告)日: | 2021-11-09 |
发明(设计)人: | 张亚东;王帅阳;胡永刚 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F16/16;G06F16/182 |
代理公司: | 济南诚智商标专利事务所有限公司 37105 | 代理人: | 黄晓燕 |
地址: | 250000 山东省济南市中国(山东)自由贸易*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 文件系统 并行 性能 评估 方法 装置 | ||
1.一种分布式文件系统的并行性能评估方法,其特征在于,包括:
当侦测到所述分布式文件系统的文件操作时,获取每种文件操作类型对应的IO并行数量信息;
统计每种文件操作类型对应的IO运行时间信息;
根据所述IO并行数量信息和所述IO运行时间信息,评估所述分布式文件系统的并行性能。
2.根据权利要求1所述的并行性能评估方法,其特征在于,所述获取每种文件操作类型对应的IO并行数量信息的步骤,包括:
记录所述文件操作触发文件锁前的IO数量,作为第一IO数量;
记录所述分布式文件系统释放所述文件锁时的IO数量,作为第二IO数量;
使用所述第一IO数量和所述第二IO数量,计算得到所述IO并行数量信息。
3.根据权利要求1或2所述的并行性能评估方法,其特征在于,所述统计每种文件类型对应的IO运行时间信息的步骤,包括:
当所述文件操作触发文件锁之前,为每个IO分配唯一标识;
记录从分配所述唯一标识的时刻至释放所述文件锁的时刻,作为本次文件操作对应的IO运行时间。
4.根据权利要求1所述的并行性能评估方法,其特征在于,所述IO并行数量信息包括平均IO并行数量,所述IO运行时间信息包括平均IO运行时长;所述评估所述分布式文件系统的并行性能的步骤,包括:
使用所述平均IO并行数量和所述平均IO运行时长之比,计算所述分布式文件系统的每秒读写次数;
以及,使用所述每秒读写次数和所述文件操作的数据块大小的乘积,计算所述分布式文件系统的带宽;
使用所述分布式文件系统的每秒读写次数和带宽,评估所述分布式文件系统的并行性能。
5.根据权利要求4所述的并行性能评估方法,其特征在于,所述使用所述分布式文件系统的每秒读写次数和带宽,评估所述分布式文件系统的并行性能的步骤,包括:
获取所述每秒读写次数最大时对应的平均IO并行数量;
计算所述平均IO并行数量对应的文件操作进程数量;
调节所述分布式文件系统至所述平均IO并行数量对应的文件操作进程数量。
6.根据权利要求1所述的并行性能评估方法,其特征在于,在统计每种文件操作类型对应的IO运行时间信息的步骤后,所述方法还包括:
根据所述IO运行时间信息,判断是否存在IO运行时间是否大于或等于预设时间阈值;
若判定存在IO的运行时间大于或等于预设时间阈值,则使用本次文件操作对应的文件位置和IO运行时间生成告警信息;
将所述告警信息记录至文件日志中。
7.一种分布式文件系统的并行性能评估装置,其特征在于,包括:
数量信息获取模块,用于当侦测到所述分布式文件系统的文件操作时,获取每种文件操作类型对应的IO并行数量信息;
时间信息统计模块,用于根据所述文件操作类型对应的唯一标识,统计每种文件操作类型对应的IO运行时间信息;
并行性能评估模块,用于根据所述IO并行数量信息和所述IO运行时间信息,评估所述分布式文件系统的并行性能。
8.根据权利要求7所述的并行性能评估装置,其特征在于,所述时间信息统计模块,包括:
标识分配子模块,用于当所述文件操作触发文件锁之前,为每个IO分配唯一标识;
运行时间记录子模块,用于记录从分配所述唯一标识的时刻至释放所述文件锁的时刻,作为本次文件操作对应的IO运行时间。
9.根据权利要求7所述的并行性能评估装置,其特征在于,所述并行性能评估模块,包括:
读写次数计算子模块,用于使用平均IO并行数量和平均IO运行时长之比,计算所述分布式文件系统的每秒读写次数;
带宽计算子模块,用于使用所述每秒读写次数和所述文件操作的数据块大小的乘积,计算所述分布式文件系统的带宽;
性能评估子模块,用于使用所述分布式文件系统的每秒读写次数和带宽,评估所述分布式文件系统的并行性能。
10.根据权利要求7所述的并行性能评估装置,其特征在于,还包括:
运行时间判断模块,用于根据所述IO运行时间信息,判断是否存在IO运行时间是否大于或等于预设时间阈值;
告警信息生成模块,用于若所述运行时间判断模块判定存在IO的运行时间大于或等于预设时间阈值时,使用本次文件操作对应的文件位置和IO运行时间生成告警信息;
告警信息记录模块,用于将所述告警信息记录至文件日志中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110835163.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种信息化资源管理系统
- 下一篇:一种具有锁紧功能的快速推拉结构及连接器