[发明专利]一种索引的分片扩容方法及系统在审
申请号: | 202110707233.5 | 申请日: | 2021-06-24 |
公开(公告)号: | CN113609245A | 公开(公告)日: | 2021-11-05 |
发明(设计)人: | 侯满 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F16/31 | 分类号: | G06F16/31 |
代理公司: | 济南诚智商标专利事务所有限公司 37105 | 代理人: | 黄晓燕 |
地址: | 250000 山东省济南市中国(山东)自由贸易*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 索引 分片 扩容 方法 系统 | ||
1.一种索引的分片扩容方法,其特征是,所述方法包括以下步骤:
获取扩容的指令参数;
基于所述指令参数,调用底层索引接口新增索引分片;
对分片进行标记,将新数据定向传输至新增的索引分片中,所述新数据为新增索引分片后存储的数据。
2.根据权利要求1所述分片扩容方法,其特征是,所述获取扩容的指令参数之前,还包括步骤:
监控分片和数据状态,评估数据分布的均衡性,在所述均衡性不符合设定条件时,下发扩容的指令参数。
3.根据权利要求1或2所述分片扩容方法,其特征是,所述指令参数包括单索引分片数、单分片数据量和索引数据总量。
4.根据权利要求1或2所述分片扩容方法,其特征是,所述对分片进行标记具体为:
以分片ID作为当前分片的标记位。
5.根据权利要求4所述分片扩容方法,其特征是,所述将新数据定向传输至新增的索引分片中具体为:
将所述新数据的原存储ID值与扩容前的分片数相加,得到的数值为当前新数据写入分片对应的标记位。
6.根据权利要求4所述分片扩容方法,其特征是,在所述将新数据定向传输至新增的索引分片中之后,还包括步骤:
对新数据增加版本标记,以当前新数据所在的分片ID除以当前索引分片数的结果取余数,作为当前新数据的版本标记;
读取数据时,增加基于所述版本标记的定向查询。
7.一种索引的分片扩容系统,其特征是,所述系统包括:
信息采集单元,用于获取扩容的指令参数;
扩容单元;基于所述指令参数,调用底层索引接口新增索引分片;
扩容处理单元;用于对分片进行标记,将新数据定向传输至新增的索引分片中,所述新数据为新增索引分片后存储的数据。
8.根据权利要求7所述索引的分片扩容系统,其特征是,所述系统还包括与所述信息采集单元连接的监测单元;所述监测单元用于监控分片和数据状态,评估数据分布的均衡性,在所述均衡性不符合设定条件时,下发扩容的指令参数。
9.根据权利要求7或8所述索引的分片扩容系统,其特征是,所述扩容处理单元包括:
标记子单元;以分片ID作为当前分片的标记位;
定向传输子单元,将所述新数据的原存储ID值与扩容前的分片数相加,得到的数值为当前新数据写入分片对应的标记位。
10.根据权利要求9所述索引的分片扩容系统,其特征是,所述系统还包括数据重定向单元,所述数据重定向单元用于对新数据增加版本标记,以当前新数据所在的分片ID除以当前索引分片数的结果取余数,作为当前新数据的版本标记;在获取所述新数据时,增加基于所述版本标记的定向查询。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110707233.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种涡旋电磁波混合模态识别方法
- 下一篇:一种全自动化的电气控制装置