[发明专利]基于分布式存储系统的数据存储方法及装置有效
申请号: | 201210048903.8 | 申请日: | 2012-02-28 |
公开(公告)号: | CN102629934A | 公开(公告)日: | 2012-08-08 |
发明(设计)人: | 宋鹏 | 申请(专利权)人: | 北京搜狐新媒体信息技术有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 逯长明;王宝筠 |
地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 分布式 存储系统 数据 存储 方法 装置 | ||
1.一种基于分布式存储系统的数据存储方法,其特征在于,该方法包括:
上报各存储基元所在存储服务器的负载信息,所述负载信息为存储服务器接收数据存储的能力信息;
根据所述负载信息按照第一预设策略生成各存储基元的权重;
接收存储请求后根据各存储基元权重按照第二预设策略分配存储基元;
将接收到的数据存储到分配的存储基元。
2.根据权利要求1所述的方法,其特征在于,在上报各存储基元所在存储服务器的负载信息时,还上报各存储基元的存储容量使用信息,则:
根据所述负载信息和存储容量使用信息按照第一预设策略生成各存储基元的权重。
3.根据权利要求2所述的方法,其特征在于,所述负载信息包括存储服务器的线程开启率、内存使用率,所述线程开启率为存储服务器当前开启的线程数与该存储服务器允许开启的最大线程数的比值,所述存储容量使用信息包括存储容量使用率,则:所述第一预设策略为:
存储基元的权重=线程开启率+内存使用率+存储容量使用率。
4.根据权利要求3所述的方法,其特征在于,所述第一预设策略为:
存储基元的权重=W1*线程开启率+W2*内存使用率+W3*存储容量使用率;
其中:所述W1、W2、W3取值范围为0到1,分别为存储服务器线程开启率、内存使用率、存储基元的存储容量使用率对存储基元权重的贡献值,W1、W2、W3之和为1。
5.根据权利要求1所述的方法,其特征在于,将多个存储基元组成存储基元组,选择该组内的一个存储基元为主存储基元,则:
在生成各存储基元的权重后,按照第三预设策略生成存储基元组的权重,接收存储请求后根据各存储基元组权重按照第二预设策略分配存储基元组,将接收到的数据通过主存储基元存储到分配的存储基元组的各存储基元。
6.根据权利要求5所述的方法,其特征在于,所述第二预设策略为:
以存储基元组的权重之和为种子,通过随机函数生成新的权重值,根据权重值所处权重区间分配存储基元组。
7.一种基于分布式存储系统的数据存储方法,其特征在于,该方法包括:
接收存储请求后,收集各存储基元所在存储服务器的负载信息,所述负载信息为存储服务器接收数据存储的能力信息;
根据所述负载信息按照第一预设策略生成各存储基元的权重;
根据各存储基元的权重按照第二预设策略分配存储基元;
将接收到的数据存储到分配的存储基元。
8.一种基于分布式存储系统的数据存储装置,其特征在于,该装置包括:上报单元、生成单元、分配单元和存储单元,其中:
所述上报单元,用于上报各存储基元所在存储服务器的负载信息,所述负载信息为存储服务器接收数据存储的能力信息;
所述生成单元,用于根据所述负载信息按照第一预设策略生成各存储基元的权重;
所述分配单元,用于在接收存储请求后根据各存储基元权重按照第二预设策略分配存储基元;
所述存储单元,用于将接收到的数据存储到分配的存储基元。
9.根据权利要求8所述的装置,其特征在于,所述上报单元在上报各存储基元所在存储服务器的负载信息时,还用于上报各存储基元的存储容量使用信息,则:生成单元用于根据所述负载信息和存储容量使用信息按照第一预设策略生成各存储基元的权重。
10.一种基于分布式存储系统的数据存储装置,其特征在于,该装置包括:收集单元、生成单元、分配单元和存储单元,其中:
所述收集单元,用于在接收存储请求后收集各存储基元所在存储服务器的负载信息,所述负载信息为存储服务器接收数据存储的能力信息;
所述生成单元,用于根据所述负载信息按照第一预设策略生成各存储基元的权重;
所述分配单元,用于根据各存储基元的权重按照第二预设策略分配存储基元;
所述存储单元,用于将接收到的数据存储到分配的存储基元。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狐新媒体信息技术有限公司,未经北京搜狐新媒体信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210048903.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:显微外科手术器械辅助放大器
- 下一篇:一种低压抽出式开关设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置