[发明专利]一种应用于RCFile存储模型的预分配的自适应压缩方法有效
| 申请号： | 201611199323.3 | 申请日： | 2016-12-22 |
| 公开（公告）号： | CN106817406B | 公开（公告）日： | 2020-05-26 |
| 发明（设计）人： | 陈珊珊;何海洋;韦立 | 申请（专利权）人： | 南京邮电大学 |
| 主分类号： | H04L29/08 | 分类号： | H04L29/08;H04L29/06 |
| 代理公司： | 南京知识律师事务所 32207 | 代理人： | 李湘群 |
| 地址： | 210003 江苏*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种应用于RCFile存储模型的预分配的自适应压缩方法。首先在客户端建立数据向量分配算法PPDA以确定数据向量属于哪一个服务器数据节点，实现相同或者相似数据的聚集在同一个服务器数据存储节点，提高同一服务器节点的数据冗余度；然后在服务器数据节点端，针对RCFile行组特点，建立基于代价的压缩算法CCA为行组的不同行选择最优的轻量级压缩算法。本发明能够增加同一服务器数据节点的数据冗余度，能够为行组的每一行选择高效的压缩算法进行数据压缩，节约系统资源，提高系统存储能力。 | ||
| 搜索关键词： | 一种 应用于 rcfile 存储 模型 分配 自适应 压缩 方法 | ||
【主权项】：
一种应用于RCFile存储模型的预分配的自适应压缩方法，其特征在于包括以下步骤：S1：在客户端使用轻量级数据向量预分配算法，将相同或相似的数据向量分配到相应的服务器数据节点，增加同一个服务器数据节点的数据可压缩性；S2：在服务器数据节点端，使用基于代价的压缩算法，对同一服务器节点数据进行自适应压缩。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于南京邮电大学，未经南京邮电大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201611199323.3/，转载请声明来源钻瓜专利网。
- 上一篇：数据同步方法和装置
- 下一篇：一种教学信息资源推送方法及系统
