[发明专利]基于时序聚合算法的海量小文件实时存储方法及装置有效
申请号: | 201611104325.X | 申请日: | 2016-12-05 |
公开(公告)号: | CN106776967B | 公开(公告)日: | 2020-03-27 |
发明(设计)人: | 朱东杰;张凯;赵奇隆;杜海文;曲荣宁;顾天凯;逄志弘;毛尉茜;李亚;彭暄 | 申请(专利权)人: | 哈尔滨工业大学(威海);威海翰宝网络科技有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/172;G06F16/13 |
代理公司: | 北京怡丰知识产权代理有限公司 11293 | 代理人: | 孙小栋;于振强 |
地址: | 264209*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于时序聚合算法的海量小文件实时存储方法及装置,其解决了现有分布式文件系统用于海量小文件时存在的存储效率低的技术问题,其采用数据聚合策略以数据的时间特性定义聚合空间,完成时序数据合并存储,通过将随机写转化为顺序写,本发明可广泛应用于海量小文件的存储。 | ||
搜索关键词: | 基于 时序 聚合 算法 海量 文件 实时 存储 方法 装置 | ||
【主权项】:
一种基于时序聚合算法的海量小文件实时存储方法,其特征是包括以下步骤:(1)使用分布式系统进行数据的时序处理,在代理节点中,根据文件的时间先后顺序进行文件对象逻辑上的排序,在存储节点中进行文件的物理排序,形成时序数据队列;(2)将时序数据队列进行逻辑分配到相应聚合空间;(3)在存储节点中相应聚合空间到物理存储分区的逻辑分配;(4)指定分区的聚合空间数据在对应存储节点进行存储操作。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学(威海);威海翰宝网络科技有限公司,未经哈尔滨工业大学(威海);威海翰宝网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611104325.X/,转载请声明来源钻瓜专利网。
- 上一篇:一种数据分析方法和装置
- 下一篇:一种通用的游戏数据接口层