[发明专利]数据块在存储设备中存储方法和存储设备有效
申请号: | 201410526254.7 | 申请日: | 2014-09-30 |
公开(公告)号: | CN104298614B | 公开(公告)日: | 2017-08-11 |
发明(设计)人: | 李育国 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F12/02 | 分类号: | G06F12/02;G06F3/06;G06F17/30 |
代理公司: | 北京同立钧成知识产权代理有限公司11205 | 代理人: | 刘芳 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 设备 方法 | ||
技术领域
本发明实施例涉及数据存储技术,尤其涉及一种数据块在存储设备中存储方法和存储设备。
背景技术
随着信息时代的不断发展,网络中的数据也在急速增长,存储海量数据的同时也随之带来了能源消耗高的问题。重复数据删除技术可以有效的删除数据中的重复部分以减少存储所需空间,多份相同的数据之间会互相引用,由于哈希计算的随机性,为了读取一份数据可能会涉及到磁盘的全面寻址。
在现有的重复数据删除技术中,将数据被分为多个数据块(Chunk),在存储时不考虑数据块的引用关系,对各个数据块进行哈希计算得到各个数据块的哈希值后将各个数据块随机存储在不同的磁盘或磁带当中,即一份数据的多个数据块存储在较多不同的磁盘或磁带当中,因此,在读取该份数据时,需要对较多的磁盘或磁带上电,导致能源消耗过大。
发明内容
本发明实施例提供的数据块在存储设备中存储方法和存储设备,可以在读取数据时减少读取时需要调用的磁盘,从而可以降低能源消耗。
第一方面,本发明实施例提供一种数据块在存储设备中存储方法,所述存储设备用于将第一数据进行重复数据删除获得第一重复数据删除集合;所述存储设备用于将第二数据进行重复数据删除获得第二重复数据删除集合;所述第一重复数据删除集合包含所述第一数据在所述存储设备中存储的唯一数据块;所述第二重复数据删除集合包括所述第二数据在所述存储设备中存储的唯一数据块和指针;所述指针用于引用所述第一重复数据删除集合中的第一数据块;其中,所述第一数据块是所述第二数据的组成部分,并且所述第一数据块与所述第二数据在所述存储设备中存储的唯一数据块不同;所述方法包括:
判断所述第一数据块的被引用数量;
当所述被引用数量超过第一阈值时,将所述第一数据块迁移到第三重复数据删除集合中。
结合第一方面,在第一种可能的实现方式中,所述第一重复数据删除集合存储在所述存储设备的第一硬盘中;所述第二重复数据删除集合存储在所述存储设备的第二硬盘中;所述第三重复数据删除集合存储在所述存储设备的第三硬盘中。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述第三硬盘的数据访问速度大于所述第一硬盘的数据访问数度。
结合第一方面的第一种可能的实现方式,在第三种可能的实现方式中,当所述第一重复数据删除集合的数据块的被引用数量均为1时,关闭所述第一硬盘电源。
第二方面,本发明实施例提供一种存储设备,所述存储设备用于将第一数据进行重复数据删除获得第一重复数据删除集合;所述存储设备用于将第二数据进行重复数据删除获得第二重复数据删除集合;所述第一重复数据删除集合包含所述第一数据在所述存储设备中存储的唯一数据块;所述第二重复数据删除集合包括所述第二数据在所述存储设备中存储的唯一数据块和指针;所述指针用于引用所述第一重复数据删除集合中的第一数据块;其中,所述第一数据块是所述第二数据的组成部分,并且所述第一数据块与所述第二数据在所述存储设备中存储的唯一数据块不同;所述设备包括:
判断单元,用于判断所述第一数据块的被引用数量;
处理单元,用于当所述被引用数量超过第一阈值时,将所述第一数据块迁移到第三重复数据删除集合中。
结合第二方面,在第一种可能的实现方式中,所述处理单元还用于:将所述第一重复数据删除集合存储在所述存储设备的第一硬盘中;将所述第二重复数据删除集合存储在所述存储设备的第二硬盘中;将所述第三重复数据删除集合存储在所述存储设备的第三硬盘中。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,所述第三硬盘的数据访问速度大于所述第一硬盘的数据访问数度。
结合第二方面的第一种可能的实现方式,在第三种可能的实现方式中,所述处理单元还用于:当所述第一重复数据删除集合的数据块的被引用数量均为1时,关闭所述第一硬盘电源。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410526254.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置