[发明专利]一种实现分布式块存储系统读写的方法及装置在审
申请号: | 202110709741.7 | 申请日: | 2021-06-25 |
公开(公告)号: | CN113608674A | 公开(公告)日: | 2021-11-05 |
发明(设计)人: | 白战豪;胡永刚 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 济南诚智商标专利事务所有限公司 37105 | 代理人: | 黄晓燕 |
地址: | 250000 山东省济南市中国(山东)自由贸易*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实现 分布式 存储系统 读写 方法 装置 | ||
1.一种实现分布式块存储系统读写的方法,其特征在于,所述方法包括:
获取IO向量队列参数,所述IO向量队列参数为:聚集写参数writev、散布读参数readv以及分散读写参数write/read中的一种;
当IO向量队列参数为writev时,采用缓存暂存的方法,对分布式块存储系统进行聚集写操作;
当IO向量队列参数为readv时,采用内存转换的方法,对分布式块存储系统进行散布读操作;
当IO向量队列参数为write/read时,采用缓存暂存与合并下发的方法,将多个缓存区的连续读写请求,统一下发至分布式块存储系统。
2.根据权利要求1所述的一种实现分布式块存储系统读写的方法,其特征在于,所述当IO向量队列参数为writev时,采用缓存暂存的方法,对分布式块存储系统进行聚集写操作,包括:
获取writev IO向量的偏移量和长度;
根据所述writev IO向量的偏移量和长度,分配新的向量和第一内存缓存区,所述新的向量用于接收转移后的writev IO向量的偏移量和长度,所述第一内存缓存区用于接收writev IO向量中的buf;
根据所述writevIO向量的偏移量和长度,将缓存数据转移至所述第一内存缓存区;
将第一内存缓存区的内存缓存区指针传入回调函数中,所述回调函数用于请求异步回调空间;
根据转移后的writev IO向量的偏移量和长度,以及所述第一内存缓存区,计算请求writev操作的数据对应的数据块和物理磁盘地址;
根据所述数据块和物理磁盘地址,对请求writev操作的数据执行异步写请求;
写入完成后,根据所述内存缓存区指针释放所述内存缓存区。
3.根据权利要求1所述的一种实现分布式块存储系统读写的方法,其特征在于,所述当IO向量队列参数为readv时,采用内存转换的方法,对分布式块存储系统进行散布读操作,包括:
获取所有readv IO向量的偏移量和长度;
根据任一所述readv IO向量的偏移量和长度,分配一个向量指针和一个第二内存缓存区,所述第二内存缓存区用于接收IO向量中的缓存数据;
将每个readv IO向量的地址传递至所述向量指针,并将所述向量指针传入回调函数中,所述回调函数用于请求异步回调空间;
根据任一所述readv IO向量的偏移量和长度,以及对应的第二内存缓存区,计算请求readv操作的数据所对应的数据块和物理磁盘地址;
根据请求readv操作的数据所对应的数据块和物理磁盘地址,对请求readv操作的数据执行异步读请求;
读取完成后,根据所述向量指针遍历所有readv IO向量,获取每个readv请求的偏移量、长度和第二内存缓存区;
单步读取磁盘缓存buf中的数据,将磁盘缓存buf中的数据写入每个readv IO向量地址所对应的第二内存缓存区。
4.根据权利要求3所述的一种实现分布式块存储系统读写的方法,其特征在于,所述单步读取磁盘缓存buf中的数据,将磁盘缓存buf中的数据写入每个readv IO向量地址所对应的第二内存缓存区,具体为:
根据每个readv请求的偏移量和长度,依次读取磁盘缓存buf中的数据,将磁盘缓存buf中的数据写入每个readv IO向量地址所对应的第二内存缓存区。
5.根据权利要求1所述的一种实现分布式块存储系统读写的方法,其特征在于,所述当IO向量队列参数为write/read时,采用缓存暂存与合并下发的方法,将多个缓存区的连续读写请求,统一下发至分布式块存储系统,包括:
申请两个队列,分别用于暂存所获取的读请求和写请求;
针对任一读请求和写请求,分配一个设置有请求超时阈值的时钟;
采用一线程对每个队列中的读请求和写请求,进行遍历与合并;
针对任一读请求或写请求,根据所述时钟判断所述读请求或写请求是否为超时请求;
如果是,判断前后两个请求是否为相邻请求;
如果是相邻请求,则合并相邻的读请求或写请求;
对合并后的读请求或写请求进行相应的读操作或写操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110709741.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种全自动钉粘箱一体机
- 下一篇:一种基于数字档案图像降噪处理方法