[发明专利]一种基于弹性块存储的数据写、读方法及装置在审
申请号: | 201510639347.5 | 申请日: | 2015-09-30 |
公开(公告)号: | CN105183399A | 公开(公告)日: | 2015-12-23 |
发明(设计)人: | 刘俊 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 马敬;项京 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例公开了一种基于弹性块存储的数据写、读方法及装置,数据写方法包括:从虚拟块设备中,获得待处理数据;将待处理数据分段,计算每段数据的哈希值;对计算得到的哈希值对应的段数据去重;将去重后的剩余的哈希值对应的第一数据写入到存储介质中;当存储介质中的第一数据的数据量每达到第二预设值时,服务进程将存储介质中的第一数据写入到存储服务器中。通过将虚拟块设备中的数据分段,计算各数据段的哈希值,根据哈希值将数据进行去重,然后把去重后的数据及数据对应的哈希值、逻辑地址和物理地址进行存储,通过哈希值访问数据,实现了去除冗余数据,节省了存储空间的占用,同时也提高了数据的查找效率。 | ||
搜索关键词: | 一种 基于 弹性 存储 数据 方法 装置 | ||
【主权项】:
一种基于弹性块存储的数据写方法,其特征在于,预先创建至少一个虚拟块设备,所述虚拟块设备为弹性块存储,所述虚拟块设备中存储有待处理数据;所述方法包括:从所述至少一个虚拟块设备中,获得待处理数据;将所述待处理数据以第一预设值进行分段,并分别计算每段数据的哈希值;对计算得到的哈希值对应的段数据去重,以使计算得到的每个哈希值对应的段数据唯一存在;将去重后的剩余的每个哈希值对应的第一数据写入到预先设置的存储介质中,所述第一数据包括:元数据和段数据,其中,所述元数据包括:哈希值、该哈希值对应的数据段的逻辑地址和物理地址及其对应关系;并将去重后的剩余的每个哈希值,确定为该哈希值对应的数据段的索引;当写入所述存储介质中的所述第一数据的数据量每达到第二预设值时,通知服务进程,以使所述服务进程将每达到所述第二预设值的数据量对应的所述存储介质中的所述第一数据写入到存储服务器中。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510639347.5/,转载请声明来源钻瓜专利网。
- 上一篇:发光二极管驱动器设备
- 下一篇:一种去除饮用水中苯的结构滤芯及其制备方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置