[发明专利]HBase的Region合并方法及装置、计算机可读存储介质

说明书

一种HBase的Region合并方法及装置、计算机可读存储介质，所述方法包括：获取集群上所有Region的信息；根据所述集群上所有Region的信息，获取预先配置的Region列表中每一个Region的信息；根据所述Region列表中每一个Region的信息，从所述Region列表中，选取出与相邻Region满足合并条件的Region；获取所有选取出的Region对应的加密Region名称列表；采用merge_region命令，将所述加密Region名称列表中相邻的两个Region进行合并。上述方案能够在集群工作的同时进行Region合并。

技术领域

本发明涉及数据处理领域，尤其涉及一种HBase的Region合并方法及装置、计算机可读存储介质。

背景技术

HBase是一个分布式的、面向列的开源数据库。HBase技术来源于Fay Chang所撰写的Google论文“bigtable：一个结构化数据的分布式存储系统”。HBase在Hadoop分布式文件系统(The Hadoop Distributed File System，HDFS)之上提供了类似于Bigtable的能力。HBase是Hadoop集群最常见的数据库，适合非结构化、海量数据的存储。

随着用户规模的不断扩大，需要存储海量用户的多维度统计数据。在大面积使用HBase存储数据时，由于多团队协作，且各团队对HBase的使用方式各不相同，导致空数据区域(Region)或者Region过小等问题，影响HBase的运行效率。

现有技术中，可以对相邻的Region进行合并，以提高HBase的运行效率。在对相邻的Region进行合并时，采用org.apache.hadoop.hbase.util.merge方法，先停止分布式数据库系统集群工作，在完成合并之后再重新启动分布式数据库系统集群。

发明内容

本发明实施例解决的是在集群工作的同时进行Region合并。

为解决上述技术问题，本发明实施例提供一种HBase的Region合并方法，包括：获取集群上所有Region的信息；根据所述集群上所有Region的信息，获取预先配置的Region列表中每一个Region的信息；根据所述Region列表中每一个Region的信息，从所述Region列表中，选取出与相邻Region满足合并条件的Region；获取所有选取出的Region对应的加密Region名称列表；采用merge_region命令，将所述加密Region名称列表中相邻的两个Region进行合并。

可选的，所述获取所有选取出的Region对应的加密Region名称列表，包括：在所有选取出的Region中，获取第i个Region的名称的最后32个字节，作为所述第i个Region对应的加密Region名称；i为正整数且i≤N，N为所述满足合并条件的Region数目；根据得到的N个加密Region名称，生成加密Region名称列表。

可选的，在将所述加密Region名称列表中相邻的两个Region进行合并之后，还包括：合并HBase metadata中重叠的Region并删除Hadoop分布式文件系统上相应的数据。

可选的，所述合并HBase metadata中重叠的Region并删除Hadoop分布式文件系统上相应的数据，包括：采用HBase的hbck命令，合并HBase metadata中重叠的Region并删除Hadoop分布式文件系统上相应的数据。

可选的，所述HBase的Region合并方法，还包括：当根据所述集群上所有Region的信息，未查找到所述Region列表中的Region的信息时，标记出所述未查找到信息的Region。