[发明专利]一种数据存储管理方法、系统及相关设备有效
申请号: | 201910582499.4 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110262758B | 公开(公告)日: | 2023-07-14 |
发明(设计)人: | 吴大立 | 申请(专利权)人: | 深信服科技股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518055 广东省深圳市南*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 存储 管理 方法 系统 相关 设备 | ||
本发明实施例提供了一种数据存储管理方法、系统及相关设备,用于提高存储资源的利用率。本发明实施例方法包括:将目标数据划分为预设大小的数据块,并识数据块的I/O特征;将I/O特征相同的数据块迁移到相同子硬盘区域,所述目标数据存储在至少两种类型的子硬盘区域;对不同类型的子硬盘区域执行不同的存储策略。
技术领域
本发明涉及数据存储技术领域,尤其涉及一种数据存储管理方法、系统及相关设备。
背景技术
在数据存储过程中,为了在空间与性能维度取得最好的综合效果,需要为业务选择合适的存储策略,例如对于只读模式的I/O操作数据存储策略往往会选用纠删码,对于写比例高的I/O操作数据存储策略往往会选择副本冗余策略。
目前存储管理系统都是根据业务粒度选择单一的存储策略,即对于同一项业务的所有数据存储策略都是统一不变的。
然而,单一的存储策略并不能实现最佳的性价比。例如,对于选用纠删码存储策略的业务在某一时期内的写操作增加时,继续使用纠删码存储策略会因为写惩罚高而导致系统资源浪费。
发明内容
本发明实施例提供了一种数据存储管理方法、系统及相关设备,用于提高存储资源的利用率。
本发明实施例第一方面提供了一种数据存储管理方法,其包括:
将目标数据划分为预设大小的数据块,并识别数据块的I/O特征;
将I/O特征相同的数据块迁移到相同子硬盘区域,所述目标数据存储在至少两种类型的子硬盘区域;
对不同类型的子硬盘区域执行不同的存储策略。
可选的,作为一种可能的实施方式,本发明实施例中数据存储管理方法还包括:
统计所述目标数据所在的存储空间的空闲容量比例;
若所述空闲容量比例不大于第一阈值,则将I/O特征为冷数据的数据块迁移至归档类型子硬盘,并对所述归档类型子硬盘中的所述冷数据对应的数据块进行压缩处理。
可选的,作为一种可能的实施方式,本发明实施例中,所述识别数据块的I/O特征包括:
周期性的识别每一个数据块的I/O特征。
可选的,作为一种可能的实施方式,本发明实施例中,所述子硬盘区域的类型数量与识别到的I/O特征的类型数量相同,每一种类型的I/O特征对应一种类型子硬盘区域。
可选的,作为一种可能的实施方式,本发明实施例中数据存储管理方法还包括:
若第一类型的子硬盘区域中存在目标数据块,所述目标数据块的I/O特征在上一周期内由第一特征变化为第二特征,则在下一周期将所述目标数据块迁移至所述第二特征对应的目标子硬盘区域。
可选的,作为一种可能的实施方式,本发明实施例中数据存储管理方法还包括:
在数据块发生迁移之后,修改迁移之后的数据块的访问路径的映射关系,以使得迁移之后的数据块能被正确访问。
本发明实施例第二方面提供了一种数据存储管理系统,可包括:
识别单元,用于将目标数据划分为预设大小的数据块,并识别数据块的I/O特征;
第一迁移单元,用于将I/O特征相同的数据块迁移到相同子硬盘区域,所述目标数据存储在至少两种类型的子硬盘;
策略单元,用于对不同类型的子硬盘区域执行不同的存储策略。
可选的,作为一种可能的实施方式,本发明实施例中的数据存储管理系统,还可以包括:
统计单元,用于统计所述目标数据所在的存储空间的空闲容量比例;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深信服科技股份有限公司,未经深信服科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910582499.4/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置