[发明专利]一种数据压缩方法及装置有效
申请号: | 201711215441.3 | 申请日: | 2017-11-28 |
公开(公告)号: | CN107947799B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 刘卯银 | 申请(专利权)人: | 郑州云海信息技术有限公司 |
主分类号: | H03M7/30 | 分类号: | H03M7/30;G06F12/02 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 450018 河南省郑州市*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据压缩 方法 装置 | ||
1.一种数据压缩方法,其特征在于,包括:
接收按照预设的第一长度输入的待压缩的块数据;
对所述块数据进行压缩,获得压缩后的压缩块数据;
将所述压缩块数据在预设的多个物理卷中按照压缩顺序进行衔接排布,获得衔接压缩块数据;
将所述衔接压缩块数据划分给多个长度为预设的第二长度的数据块,以使系统以所述数据块为单位进行空间释放;
其中,所述第二长度为对所述衔接压缩块数据进行存储的磁盘阵列条带的长度的整数倍。
2.根据权利要求1所述的方法,其特征在于,所述接收按照预设的第一长度输入的待压缩的块数据,包括:
接收通过补齐读的方式按照预设的第一长度输入的待压缩的块数据。
3.根据权利要求2所述的方法,其特征在于,所述对所述块数据进行压缩,包括:
利用在线无损压缩的方式对所述块数据进行压缩。
4.根据权利要求1至3之中任一项所述的方法,其特征在于,在所述将所述衔接压缩块数据划分给多个长度为预设的第二长度的数据块之后,还包括:
为每个数据块设置相应的元数据区;
将每个数据块中所述衔接压缩块数据的元数据信息存储到对应的元数据区中;
其中,所述元数据信息包括每个第一长度的待压缩的块数据的地址与对应的所述衔接压缩块数据所在的物理卷的ID和所述物理卷的地址的对应关系。
5.根据权利要求4所述的方法,其特征在于,所述系统以所述数据块为单位进行空间释放,包括:
针对每个数据块判断所述对应关系是否均发生改变;
如果是,则确定所述数据块中的各所述衔接压缩块数据为无效块数据;
将所述数据块进行空间释放。
6.一种数据压缩装置,其特征在于,包括:
块数据接收模块,用于接收按照预设的第一长度输入的待压缩的块数据;
块数据压缩模块,用于对所述块数据进行压缩,获得压缩后的压缩块数据;
衔接压缩块数据获得模块,用于将所述压缩块数据在预设的多个物理卷中按照压缩顺序进行衔接排布,获得衔接压缩块数据;
数据块划分模块,用于将所述衔接压缩块数据划分给多个长度为预设的第二长度的数据块,以使系统以所述数据块为单位进行空间释放;
其中,所述第二长度为对所述衔接压缩块数据进行存储的磁盘阵列条带的长度的整数倍。
7.根据权利要求6所述的装置,其特征在于,所述块数据接收模块具体为接收通过补齐读的方式按照预设的第一长度输入的待压缩的块数据的模块。
8.根据权利要求7所述的装置,其特征在于,所述块数据压缩模块具体为利用在线无损压缩的方式对所述块数据进行压缩的模块。
9.根据权利要求6至8之中任一项所述的装置,其特征在于,还包括:
元数据区设置模块,用于在所述将所述衔接压缩块数据划分给多个长度为预设的第二长度的数据块之后,为每个数据块设置相应的元数据区;
信息存储模块,用于将每个数据块中所述衔接压缩块数据的元数据信息存储到对应的元数据区中;
其中,所述元数据信息包括每个第一长度的待压缩的块数据的地址与对应的所述衔接压缩块数据所在的物理卷的ID和所述物理卷的地址的对应关系。
10.根据权利要求9所述的装置,其特征在于,所述数据块划分模块,包括:
无效块数据确定子模块,用于针对每个数据块判断所述对应关系是否均发生改变,如果是,则确定所述数据块中的各所述衔接压缩块数据为无效块数据;
空间释放子模块,用于将所述数据块进行空间释放。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州云海信息技术有限公司,未经郑州云海信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711215441.3/1.html,转载请声明来源钻瓜专利网。