[发明专利]基于对象存储Hadoop提交器的实现方法及装置有效
申请号: | 202010188188.2 | 申请日: | 2020-03-17 |
公开(公告)号: | CN111400257B | 公开(公告)日: | 2021-10-01 |
发明(设计)人: | 战策;张旭明;王豪迈;胥昕 | 申请(专利权)人: | 星辰天合(北京)数据科技有限公司 |
主分类号: | G06F16/16 | 分类号: | G06F16/16;G06F16/172;G06F16/182 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 周春枚 |
地址: | 100097 北京市海淀区蓝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于对象存储Hadoop提交器的实现方法及装置。该发明包括:读取一个或多个文件,其中,文件的自定义元数据用于表征文件的描述信息;使用文件秒合功能将一个或多个文件进行合并,生成新文件;将新文件存储到目标目录下,其中,新文件作为软连接用于指向对应的源数据文件。通过本发明,解决了相关技术中在文件存储时采用的提交协议导致文件存储效率低下的技术问题。 | ||
搜索关键词: | 基于 对象 存储 hadoop 提交 实现 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于星辰天合(北京)数据科技有限公司,未经星辰天合(北京)数据科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010188188.2/,转载请声明来源钻瓜专利网。