[发明专利]适用于分布式文件系统的文件随机写方法及系统有效
申请号: | 201910973982.5 | 申请日: | 2019-10-14 |
公开(公告)号: | CN110795407B | 公开(公告)日: | 2022-06-10 |
发明(设计)人: | 沈晨;杜真真;王敬平;黄子君;徐文远;周洁;褚少鹤 | 申请(专利权)人: | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) |
主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F16/182 |
代理公司: | 上海段和段律师事务所 31334 | 代理人: | 李佳俊;郭国中 |
地址: | 201800 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种适用于分布式文件系统的文件随机写方法及系统,包括:步骤1:将HDFS的写接口更新成支持随机写模式,使随机写操作仅影响直接修改的块或者有限的相邻块;步骤2:扩展HDFS数据传输协议,使客户端可访问任意的数据分块;步骤3:更新服务端数据包处理、更新校验值计算,获取数据副本更新、校验值更新。本发明中,存储于分布式文件系统的文件在更新数据内容时,只会影响当前数据分块及相邻的数据分块,而不会像原生HDFS需将整个文件写回,造成大量不必要的数据传输,本发明有效的减少了数据传输和移动,缓解网络带宽压力,降低客户端和服务端的处理资源消耗。 | ||
搜索关键词: | 适用于 分布式 文件系统 文件 随机 方法 系统 | ||
【主权项】:
1.一种适用于分布式文件系统的文件随机写方法,其特征在于,包括:/n步骤1:将HDFS的写接口更新成支持随机写模式,使随机写操作仅影响直接修改的块或者有限的相邻块;/n步骤2:扩展HDFS数据传输协议,使客户端可访问任意的数据分块;/n步骤3:更新服务端数据包处理、更新校验值计算,获取数据副本更新、校验值更新。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华东计算技术研究所(中国电子科技集团公司第三十二研究所),未经华东计算技术研究所(中国电子科技集团公司第三十二研究所)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910973982.5/,转载请声明来源钻瓜专利网。