[发明专利]处理压缩文件的方法和装置有效
申请号: | 201510016383.6 | 申请日: | 2015-01-13 |
公开(公告)号: | CN104579357B | 公开(公告)日: | 2018-06-22 |
发明(设计)人: | 袁安峰;吕信 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | H03M7/30 | 分类号: | H03M7/30;G06F17/30 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 姜劲;金洁 |
地址: | 100080 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种处理压缩文件的方法和装置,能够使Presto支持LZO压缩格式。本发明的处理压缩文件的方法包括:在Presto服务器启动时,将Hadoop‑lzo插件作为第三方插件导入;在所述Presto服务器读取到lzo压缩格式的文件的情况下,使用所述Hadoop‑lzo插件处理所述lzo压缩格式的文件。 | ||
搜索关键词: | 压缩格式 压缩文件 方法和装置 读取 第三方插件 服务器启动 插件处理 插件 服务器 | ||
【主权项】:
1.一种处理压缩文件的方法,其特征在于,包括:在Presto服务器启动时,将Hadoop‑lzo插件作为第三方插件导入;在所述Presto服务器读取到lzo压缩格式的文件的情况下,使用所述Hadoop‑lzo插件处理所述lzo压缩格式的文件;在使用所述Hadoop‑lzo插件处理lzo压缩格式的数据时,调用lzo压缩或解压缩函数;其中该lzo压缩或解压缩函数继承通用的压缩或解压缩函数,并且使用Hadoop‑lzo插件提供的接口进行重写;在需要支持其他压缩格式时,添加新的插件,并使用该插件提供的接口重写所述通用的压缩或解压缩函数;在所述Presto服务器读取到lzo压缩格式的文件的情况下,还包括:判断所述lzo压缩格式的文件是否存在索引文件,若是,则根据该索引文件对所述lzo压缩格式的文件进行分片得到多个数据片;使用所述Hadoop‑lzo插件处理所述lzo压缩格式的文件的步骤包括:使用所述Hadoop‑lzo插件,对所述多个数据片进行并行处理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510016383.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种增强型卫星信号接收器
- 下一篇:多级噪声整形模数转换器