[发明专利]一种位于HBase客户端的用户数据有效性验证方法

说明书

本发明公开一种位于HBase客户端的用户数据有效性验证方法，包括在HBase客户端的基于HBase的tablemeta表和基于HBase的ManageUserTableMeta类；tablemeta表用于存储用户表元数据，所述用户表元数据包括表名、列族、列成员；ManageUserTableMeta类封装了：建立用户表元数据、维护用户表元数据、在客户端验证用户表元数据。本发明提供的技术方案能够减轻HBase服务器的负载，减少HBase服务器资源和集群网络资源的开销。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种位于HBase客户端的用户数据有效性验证方法。

背景技术

HBase是成熟的具有广泛应用的分布式在线存储系统，应用HBase需频繁写入、读取、删除操作HBase用户表单元格数据，操作HBase用户表单元格数据的方法是通过HBase用户表的行关键字、列族:列成员和单元格版本号的组合。读写删HBase用户表数据需与HBase集群服务器通信，以验证表名和列族是否存在，该验证将占用HBase服务器和网络资源，若不验证将因表名或者列族不存在而引发异常。

发明内容

本发明旨在提供一种位于HBase客户端的用户数据有效性验证方法，能够减轻HBase服务器的负载，减少HBase服务器资源和集群网络资源的开销。

为达到上述目的，本发明采用的技术方案包括：

本发明公开的位于HBase客户端的用户数据有效性验证方法，包括在HBase客户端的基于HBase的tablemeta表和基于HBase的ManageUserTableMeta类；

所述tablemeta表用于存储用户表元数据，所述用户表元数据包括表名、列族、列成员；

所述ManageUserTableMeta类封装了：建立用户表元数据、维护用户表元数据、在客户端验证用户表元数据；

所述建立用户表元数据包括：将用户表元数据缓存在HBase客户端的hashmaptm变量中或者从tablemeta表将用户表元数据加载到hashmaptm中；

所述维护用户表元数据包括：当创建、重命名和删除用户表名时，或者当增加、重命名和删除列族名时，或者当列族及其列成员集加载和移除时，更新tablemeta表中的用户表元数据；

所述在客户端验证用户表元数据包括：利用tablemeta表验证用户请求的用户表元数据。

优选的，所述tablemeta表只在首次启动时建立。

进一步的，所述ManageUserTableMeta类还封装了：输出用户表元数据。

优选的，所述tablemeta表的行关键字为用户表名+分隔符+列族名；tablemeta表的列族为metadata，列成员为qualifierset和loadmem，列成员qualifierset存储用户表和列族对应的列成员集合；列成员loadmem为布尔类型，列成员loadmem表明列族中的所有列成员是否要加载HBase客户端，列成员loadmem取值为逻辑真表明列族需加载到HBase客户端，否则不加载，列成员loadmem默认取值为逻辑真，加载的粒度为列族的所有列成员。

优选的，在建立用户表元数据时，所述用户表元数据永久存储在tablemeta表中。

优选的，所述ManageUserTableMeta类包括：

MakeTable函数，用于在创建用户表时维护用户表元数据；

addfamilies函数，用于在增加列族时维护用户表元数据；

deletefamilies函数，用于在删除列族时维护用户表元数据；