[发明专利]一种缓存策略写入分层硬件架构下的写性能优化方法在审

专利信息
申请号: 201810769373.3 申请日: 2018-07-13
公开(公告)号: CN109062505A 公开(公告)日: 2018-12-21
发明(设计)人: 钱琳;梅竹;俞俊;朱广新;庞恒茂;卜敏;陈海洋;凌阳;王剑;江樱;宋德炳;许明杰;王琳 申请(专利权)人: 南瑞集团有限公司;国电南瑞科技股份有限公司;国网浙江省电力有限公司
主分类号: G06F3/06 分类号: G06F3/06
代理公司: 南京苏高专利商标事务所(普通合伙) 32204 代理人: 吕朦
地址: 210000 江*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 写性能 分层 存储 缓存策略 硬件架构 映射 区块 写入 优化 磁盘管理器 存储器 保障数据 操作转换 存储容量 存储资源 高速存储 管理策略 控制算法 目标设备 热点数据 实时动态 数据分层 物理存储 性能提升 虚拟设备 资源信息 存储层 数据量 多层 互动 冷热 与非 整合 聚合 置换 制定
【权利要求书】:

1.一种缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,包括以下步骤:

步骤一、按照不同功能属性将存储层分成多个子存储层;

步骤二、将HDD 普通磁盘与SSD磁盘作为磁盘管理器中的目标设备,聚合成为一个虚拟设备Cache存储器,对Cache存储器磁盘进行区块映射,所述区块映射为从HDD普通磁盘到SSD磁盘的区块映射;

步骤三、接收写操作的IO请求后,根据不同子存储层中数据的写频率、数据量、数据大小选择缓存策略,利用区块映射将对HDD普通磁盘的写操作映射并转发到对SSD磁盘的写操作。

2.根据权利要求1所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,所述步骤二中的区块映射采用线性映射,或采用Hash映射。

3.根据权利要求1所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,步骤三中,采用回写模式进行写操作。

4.根据权利要求1所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,步骤三中,全部缓存到SSD磁盘,如果SSD磁盘的空间不够,则根据缓存策略,将Cache存储器中的数据同步到HDD普通磁盘;但是当SSD磁盘中的脏数据达到预先设定的阀值时,将脏数据同步到SSD磁盘中。

5.根据权利要求1所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,所述步骤一的存储层采用内存、SSD、NVM、3D-Xpoint中的一种作为存储介质。

6.根据权利要求3所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,步骤三的缓存策略包括先进先出策略、最近最久未使用策略、最少使用缓存策略、随机缓存策略。

7.根据权利要求5所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,选择缓存策略的方法为:

(1)当按线性顺序访问地址空间时选择使用先进先出策略,所述先进先出策略选择在SSD磁盘中停留时间最长的block置换;

(2)当数据的利用率较低时采取最近最久未使用策略,所述最近最久未使用策略选择在最近一段时间里最久没有使用过的Block予以置换;

(3)当小文件数据量较多时采用最少使用缓存策略,所述最少使用缓存策略选择最近时间使用最少的Block替换;

(4)当数据写入频率较频繁时采用随机缓存策略,所述随机缓存策略用软硬件的随机数产生SSD磁盘要替换Block的序号。

8.根据权利要求1所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,步骤一中,采用卷的数据分层控制算法以数据处理的冷热度为依据将数据进行分层控制,所述卷的数据分层控制算法根据各分层下所有数据的IO数量、读写比例、IO位置、IO参数以及每个子系统的高速与慢速介质比例自适应变化。

9.根据权利要求1所述的缓存策略写入分层硬件架构下的写性能优化方法,其特征在于,步骤一的子存储层为DRAM缓存、SSD缓存、高速SSD层、慢速HDD层。

10.一种缓存策略写入分层硬件架构下的写性能优化设备,其特征在于,包括存储层及虚拟设备Cache存储器,存储层根据不同功能属性分为多个子存储层;虚拟设备Cache存储器包括HDD普通磁盘与SSD磁盘,HDD普通磁盘与SSD磁盘间有区块映射;子存储层用于根据数据的写频率、数据量、数据大小选择合适的缓存策略;Cache存储器用于将对HDD普通磁盘的写操作映射并转发到对SSD磁盘的写操作。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南瑞集团有限公司;国电南瑞科技股份有限公司;国网浙江省电力有限公司,未经南瑞集团有限公司;国电南瑞科技股份有限公司;国网浙江省电力有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201810769373.3/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top