[发明专利]一种基于服务器节点硬件资源密度的数据分片方法有效
申请号: | 202210312982.2 | 申请日: | 2022-03-28 |
公开(公告)号: | CN114629908B | 公开(公告)日: | 2023-10-13 |
发明(设计)人: | 鲁萍;王刚;陈伟;杨运平;黄滔;金路;叶金韬 | 申请(专利权)人: | 浙江邦盛科技股份有限公司 |
主分类号: | H04L67/10 | 分类号: | H04L67/10;H04L67/1074;H04L67/1097;H04L12/42;H04L41/0894 |
代理公司: | 杭州求是专利事务所有限公司 33200 | 代理人: | 刘静 |
地址: | 310012 浙江省杭州市西湖*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 服务器 节点 硬件 资源 密度 数据 分片 方法 | ||
1.一种基于服务器节点硬件资源密度的数据分片方法,其特征在于,该方法包括以下步骤:
(1)获取服务器节点的CPU核心数、内存大小以及网络带宽,根据这三个参数分别乘以权重并求和得到服务器节点硬件资源密度;
(2)将整体服务器全局数据分为P个分片,并形成一个散列环,最后一个分片和第一个分片首位相连,第一个分片标记为分片0,最后一个分片标记为分片P-1;
(3)将服务器节点添加到散列环上,每个节点负责散列环上一段弧的数据分片,这段弧从当前服务器节点开始,然后逆时针走到第一个服务器节点结束。
(4)当服务器集群中新添加服务器节点Snew时,将Snew插入到散列环最长的一段弧中,进行数据分片变更,
(5)当服务器集群中有服务器节点S离开时,寻找S在散列环上顺时针和逆时针的第一个节点,进行逆时针和顺时针延长,数据分片进行变更。
2.根据权利要求1所述的一种基于服务器节点硬件资源密度的数据分片方法,其特征在于,步骤(3)中,数据首先计算其散列值,然后对分片数P取余,得到数据所处的分片,并获得该分片所在散列环上的弧,从而确定存储该数据的服务器节点。
3.根据权利要求1所述的一种基于服务器节点硬件资源密度的数据分片方法,其特征在于,步骤(4)中服务器集群中新添加服务器节点Snew时,数据分片变更的具体步骤如下:
(4.1)若集群中没有服务器节点,则Snew拥有全部的数据分片,并且Snew位于散列环的起始位置;否则,选取散列环上最长的一段弧,获取存储该弧的数据分片对应的服务器节点,记为Sold;
(4.2)计算Snew和Sold的服务器节点硬件资源密度,分别记为dnew和dold;
(4.3)将该弧拆分成两段,Snew负责的弧对应的分片数pnew和Sold负责的弧对应的分片数pold满足将Snew插入到散列环最长的一段弧中,而Sold在散列环上的位置保持不变。
4.根据权利要求1所述的一种基于服务器节点硬件资源密度的数据分片方法,其特征在于,步骤(5)中,服务器集群中有服务器节点S离开时,数据分片进行变更的具体步骤如下:
(5.1)若节点S离开后,集群只剩余1台服务器,那么剩余的1台服务器拥有全部的数据分片,并且其位于散列环的起始位置;
(5.2)若节点S离开后,集群没有服务器,则散列环为空,即散列环上不包含任何服务器节点;
(5.3)否则,寻找S在散列环上顺时针和逆时针的第一个节点,分别记作S1和S2;计算S1和S2的服务器节点硬件资源密度,分别记为d1和d2;
(5.4)S1负责的弧向逆时针延长,S2负责的弧向顺时针延长,延长长度对应的分片数分别为p1和p2,并满足其它服务器节点在环上的位置保持不变。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江邦盛科技股份有限公司,未经浙江邦盛科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210312982.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种普外科手术创面清理消毒装置
- 下一篇:一种安全防爆储气罐