[发明专利]数据块的划分方法、装置及系统有效
申请号: | 201610003072.0 | 申请日: | 2016-01-04 |
公开(公告)号: | CN105677249B | 公开(公告)日: | 2019-01-15 |
发明(设计)人: | 周斌;苏志杰 | 申请(专利权)人: | 浙江宇视科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 林祥 |
地址: | 310051 浙江省杭州市滨江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 划分 方法 装置 系统 | ||
1.一种数据块的划分方法,其特征在于,所述方法应用于存储系统中,所述存储系统中应用了纠删码机制,所述方法包括:
构建M个存储节点,其中,M为不大于N+1的正整数,N为任意质数,每个所述存储节点包含的物理磁盘个数为N;
将每个所述存储节点包含的每个物理磁盘划分出多个数据块,其中,每个所述物理磁盘包含的数据块的个数为N;
对所述数据块进行分组,同一组的数据块属于同一个纠删组,使得每组中的数据块分布于不同的存储节点上,并且,对于任意所述存储节点中的任意物理磁盘,所包含的数据块对应的组中的其它数据块,均分布在不同的物理磁盘上。
2.根据权利要求1所述的方法,其特征在于,当构建的存储节点个数为N+1时,所述对所述数据块进行分组,包括:
对每个所述存储节点顺序编号;
将每个所述存储节点划分成N个虚拟磁盘,使每个所述虚拟磁盘包括N个数据块,并且每个所述虚拟磁盘包括的数据块均分布在不同的物理磁盘上;
对每个所述存储节点中的每个所述虚拟磁盘顺序编号;
对每个所述存储节点中的每个所述物理磁盘顺序编号;
对所述数据块进行分组,用Mk[i,j]表示数据块,使得任意k≠1的数据块Mk[j,i+(k-2)(j-1)-nN]与k=1的数据块M1[i,j]同属于一个纠删组,其中,k表示所述数据块所属的存储节点的编号,k∈[1,N]且为整数,i表示所述数据块所属的虚拟磁盘的编号,i∈[1,N]且为整数,j表示所述数据块所属的物理磁盘的编号,j∈[1,N]且为整数,n为使i+(k-2)(j-1)-nN∈[1,N]的整数。
3.一种数据块的划分装置,其特征在于,所述装置应用于存储系统中,所述存储系统中应用了纠删码机制,所述装置包括:
构建单元,用于构建M个存储节点,其中,M为不大于N+1的正整数,N为任意质数,每个所述存储节点包含的物理磁盘个数为N;
划分单元,用于将每个所述存储节点包含的每个物理磁盘划分出多个数据块,其中,每个所述物理磁盘包含的数据块的个数为N;
分组单元,用于对所述数据块进行分组,同一组的数据块属于同一个纠删组,使得每组中的数据块分布于不同的存储节点上,并且,对于任意所述存储节点中的任意物理磁盘,所包含的数据块对应的组中的其它数据块,均分布在不同的物理磁盘上。
4.根据权利要求3所述的装置,其特征在于,当构建的存储节点个数为N+1时,所述分组单元包括:
第一编号子单元,用于对每个所述存储节点顺序编号;
虚拟磁盘划分子单元,用于将每个所述存储节点划分成N个虚拟磁盘,使每个所述虚拟磁盘包括N个数据块,并且每个所述虚拟磁盘包括的数据块均分布在不同的物理磁盘上;
第二编号子单元,用于对每个所述存储节点中的每个所述虚拟磁盘顺序编号;
第三编号子单元,用于对每个所述存储节点中的每个所述物理磁盘顺序编号;
数据块分组子单元,用于对所述数据块进行分组,用Mk[i,j]表示数据块,使得任意k≠1的数据块Mk[j,i+(k-2)(j-1)-nN]与k=1的数据块M1[i,j]同属于一个纠删组,其中,k表示所述数据块所属的存储节点的编号,k∈[1,N]且为整数,i表示所述数据块所属的虚拟磁盘的编号,i∈[1,N]且为整数,j表示所述数据块所属的物理磁盘的编号,j∈[1,N]且为整数,n为使i+(k-2)(j-1)-nN∈[1,N]的整数。
5.一种存储系统,其特征在于,所述存储系统 中应用了纠删码机制,
所述存储系统包括M个存储节点,其中,M为不大于N+1的正整数,N为任意质数,每个所述存储节点包含个数为N的物理磁盘;每个物理磁盘被划分出多个数据块,其中,每个所述物理磁盘包含的数据块的个数为N;所述数据块被分成多组,同一组的数据块属于同一个纠删组,每组中的数据块分布于不同的存储节点上,并且,对于任意所述存储节点中的任意物理磁盘,所包含的数据块对应的组中的其它数据块,均分布在不同的物理磁盘上。
6.根据权利要求5所述的存储系统,其特征在于,
所述存储系统包括N+1个存储节点,每个所述存储节点被划分成N个虚拟磁盘,每个所述虚拟磁盘包括N个数据块,并且每个所述虚拟磁盘包括的数据块均分布在不同的物理磁盘上;所述数据块被分成多组,用Mk[i,j]表示数据块,任意k≠1的数据块Mk[j,i+(k-2)(j-1)-nN]与k=1的数据块M1[i,j]同属于一组,且属于同一个纠删组,n为使i+(k-2)(j-1)-nN∈[1,N]的整数,其中,k表示所述数据块所属的存储节点的编号,k∈[1,N]且为整数,i表示所述数据块所属的虚拟磁盘的编号,i∈[1,N]且为整数,j表示所述数据块所属的物理磁盘的编号,j∈[1,N]且为整数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江宇视科技有限公司,未经浙江宇视科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610003072.0/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置