[发明专利]一种块设备的数据写入方法、装置及介质有效
申请号: | 201711173643.6 | 申请日: | 2017-11-22 |
公开(公告)号: | CN107967122B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 李成杰 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 设备 数据 写入 方法 装置 介质 | ||
本发明公开了一种块设备的数据写入方法、装置及介质,该方法的步骤包括:获取待写入的数据以及数据的数据总量;在块设备中申请容量符合数据总量的存储空间,并将数据分块写入至存储空间;生成数据在存储空间内的地址偏移以及数据的属性信息以写入键值数据库,并通过MiniFS文件系统将地址偏移以及属性信息写入块设备。本方法在仅具有文件系统基本功能的MiniFS文件系统的基础上进行数据写入机制的进一步完善,数据在存储到块设备前无需再写入到日志中,进而减少了对块设备使用寿命的影响。本方法降低了数据写入时所造成的系统整体开销,保证了系统整体的性能。此外,本发明还提供一种块设备的数据写入装置及介质,有益效果如上所述。
技术领域
本发明涉及数据存储领域,特别是涉及一种块设备的数据写入方法、装置及介质。
背景技术
随着大数据时代的到来,数据的附加价值逐渐增加,对数据进行安全可靠的存储被越来越多的企业所重视。
当前最为主流的数据存储方式为采用分布式存储系统,最终将数据写入到块设备中以实现数据的安全存储,当下最常见的方式是使用xfs、ext4等常规文件系统。但是上述文件系统在新数据到来时,需要先将数据写入日志,进而在一段时间后再将数据由日志写入数据文件并存储至块设备中,因此数据存储到块设备前需要经过日志与数据文件之间的I/O操作,造成写放大现象,影响块设备的使用寿命,此外由于每次的I/O操作都会占用系统的可用资源,进而将增加系统的整体开销,影响了整体的性能。
由此可见,提供一种块设备的数据写入方法,以减少对块设备使用寿命的影响,并且降低数据写入所造成的系统整体开销,以保证系统整体的性能,是本领域技术人员亟待解决的问题。
发明内容
本发明的目的是提供一种块设备的数据写入方法、装置及介质,以减少对块设备使用寿命的影响,并且降低数据写入所造成的系统整体开销,以保证系统整体的性能。
为解决上述技术问题,本发明提供一种块设备的数据写入方法,包括:
获取待写入的数据以及数据的数据总量;
在块设备中申请容量符合数据总量的存储空间,并将数据分块写入至存储空间;
生成数据在存储空间内的地址偏移以及数据的属性信息以写入键值数据库,并通过MiniFS文件系统将地址偏移以及属性信息写入块设备。
优选的,在块设备中申请容量符合数据总量的存储空间前,该方法进一步包括:
构建B+树,并通过B+树记录块设备中的可用空间;
相应的,在块设备中申请容量符合数据总量的存储空间具体为:
根据B+树中选取可用空间,以在块设备中申请存储空间。
优选的,生成数据在存储空间内的地址偏移以及数据的属性信息以写入键值数据库,具体为:
在内存中生成地址偏移以及属性信息。
优选的,在生成数据在存储空间内的地址偏移以及数据的属性信息以写入键值数据库前,该方法进一步包括:
通过在块设备中读取超级块信息以对MiniFS文件系统进行初始化。
优选的,在将地址偏移以及属性信息写入键值数据库后,该方法进一步包括:
将MiniFS文件系统的操作内容记录为工作日志。
优选的,键值数据库具体包括:
LevelDB以及RocksDB。
此外,本发明还提供一种块设备的数据写入装置,包括:
获取计算模块,用于获取待写入的数据以及数据的数据总量;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711173643.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:数据写入方法和存储设备
- 下一篇:基于云服务器的便携式网络硬盘
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置