[发明专利]一种基于Protocol Buffer的镜像缓存方法有效
申请号: | 202010090744.2 | 申请日: | 2020-02-13 |
公开(公告)号: | CN111338567B | 公开(公告)日: | 2021-09-17 |
发明(设计)人: | 刘志魁 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 张春辉 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 protocol buffer 缓存 方法 | ||
1.一种基于Protocol Buffer的镜像缓存方法,其特征在于,应用于主节点,包括:
接收IO请求;
确定满足预设聚合条件的IO请求集合;
对所述IO请求集合中各个IO请求进行结构化处理和聚合处理,得到结构化数据;
对所述结构化数据进行Protocol Buffer序列化,得到二进制数据;
根据所述二进制数据生成单个镜像请求,并发送至从节点,以实现镜像缓存;所述主节点和所述从节点位于基于全闪存储设备的存储系统;
所述确定满足预设聚合条件的IO请求集合,包括:
判断当前接收到的IO请求的数量是否达到预设数量阈值;
若达到,将当前接收到的IO请求作为IO请求集合;
在所述判断当前接收到的IO请求的数量是否达到预设数量阈值之后,还包括:
若当前接收到的IO请求的数量未达到预设数量阈值,则判断未接收到新的IO请求的时间是否超过预设时间阈值;
若超过,则将当前接收到的IO请求作为IO请求集合。
2.如权利要求1所述的方法,其特征在于,所述对所述IO请求集合中各个IO请求进行结构化处理和聚合处理,得到结构化数据,包括:
将所述IO请求集合中各个所述IO请求的数据落盘位置和数据载荷存储至结构体数组。
3.如权利要求2所述的方法,其特征在于,在所述将所述IO请求集合中各个所述IO请求的数据落盘位置和数据载荷存储至结构体数组之前,还包括:
创建结构体数组,其中所述结构体数组包括多个结构体,所述结构体包括第一成员和第二成员,所述第一成员用于存储所述IO请求的数据落盘位置,所述第二成员用于存储所述IO请求的数据载荷。
4.如权利要求1-3任意一项所述的方法,其特征在于,所述IO请求为元数据IO请求。
5.一种基于Protocol Buffer的镜像缓存装置,其特征在于,应用于主节点,包括:
IO请求接收模块:用于接收IO请求;
集合确定模块:用于确定满足预设聚合条件的IO请求集合;
IO请求聚合模块:用于对所述IO请求集合中各个IO请求进行结构化处理和聚合处理,得到结构化数据;
序列化模块:用于对对所述结构化数据进行Protocol Buffer序列化,得到二进制数据;
镜像请求发送模块:用于根据所述二进制数据生成单个镜像请求,并发送至从节点,以实现镜像缓存;所述主节点和所述从节点位于基于全闪存储设备的存储系统;
所述集合确定模块,用于:
判断当前接收到的IO请求的数量是否达到预设数量阈值;
若达到,将当前接收到的IO请求作为IO请求集合;
所述集合确定模块,还用于:
若当前接收到的IO请求的数量未达到预设数量阈值,则判断未接收到新的IO请求的时间是否超过预设时间阈值;
若超过,则将当前接收到的IO请求作为IO请求集合。
6.一种基于Protocol Buffer的镜像缓存方法,其特征在于,应用于从节点,包括:
接收主节点发送的单个镜像请求;所述主节点和所述从节点位于基于全闪存储设备的存储系统;
对所述镜像请求所携带的二进制数据进行Protocol Buffer反序列化,得到结构化数据,所述结构化数据包括满足预设聚合条件的多个IO请求的镜像数据;
将所述镜像数据存储至本地缓存;
所述预设聚合条件为:当前接收到的IO请求的数量达到预设数量阈值,或者,当前接收到的IO请求的数量未达到预设数量阈值且未接收到新的IO请求的时间超过预设时间阈值。
7.如权利要求6所所述的方法,其特征在于,所述对所述镜像请求所携带的二进制数据进行Protocol Buffer反序列化,得到结构化数据,所述结构化数据包括满足预设聚合条件的多个IO请求的镜像数据,包括:
对所述镜像请求所携带的二进制数据进行Protocol Buffer反序列化,得到结构体数组,所述结构体数组包括满足预设聚合条件的多个IO请求的数据落盘位置和数据载荷。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010090744.2/1.html,转载请声明来源钻瓜专利网。