[发明专利]一种基于HBase的接口构造方法及系统在审
申请号: | 201611021940.4 | 申请日: | 2016-11-16 |
公开(公告)号: | CN106776717A | 公开(公告)日: | 2017-05-31 |
发明(设计)人: | 曾攀;范卫卫;温宗臣;张翼 | 申请(专利权)人: | 北京集奥聚合科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京和信华成知识产权代理事务所(普通合伙)11390 | 代理人: | 胡剑辉 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 hbase 接口 构造 方法 系统 | ||
技术领域
本发明涉及大数据处理的技术领域,尤其涉及一种基于HBase的接口构造方法,以及基于HBase的接口构造系统。
背景技术
HBase是一个分布式的、面向列的开源数据库,该技术来源于Fay Chang所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统(File System)所提供的分布式数据存储一样,HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。
HBase是一种高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。作为以数据为生存之本的大数据公司,为用户提供数据服务自然是重中之重,这就需要为用户开发专有的数据查询接口服务。
HBase提供两种查询方式:
1、Get方法,按指定RowKey获取唯一一条记录
2、Scan方法,按指定条件获取一批记录
因此,需要根据每个用户的需求为其单独开发相应的查询接口并部署服务,无法做到接口服务的通用性。
如果服务的用户数量很多,对每一个用户都要单独开发接口并且为其部署一套或多套(高并发访问情况)服务,开发的过程中做了很多的重复性工作,效率低,而且服务占用了很多系统资源,更不便于后期的维护和管理。
发明内容
为克服现有技术的缺陷,本发明要解决的技术问题是提供了一种基于HBase的接口构造方法,其对于新增的业务需求,只需进行简单的配置,不需要再进行重复开发和部署服务的工作,就可以实现其对数据查询的需求,通用性好,而且充分利用服务器系统资源,提高系统的易用性和可扩展性。
本发明的技术方案是:这种基于HBase的接口构造方法,该方法包括以下步骤:
(1)使用mysql数据库对用户权限信息、通用接口服务的元数据信息进行存储和控制;
(2)设置通用接口服务;
(3)配置控制模块:提供可视化系统,用于控制用户权限信息和通用接口信息;
(4)设置对外提供接口服务:根据用户的业务需求配置用户权限和接口访问信息,然后反馈给用户访问接口服务的URL。
本发明通过使用mysql数据库对用户权限信息、通用接口服务的元数据信息进行存储和控制,设置通用接口服务,配置用户权限信息和通用接口信息,根据业务需求和实际访问情况,合理部署服务,做好负载均衡,因此对于新增的业务需求,只需进行简单的配置,不需要再进行重复开发和部署服务的工作,就可以实现其对数据查询的需求,通用性好,而且充分利用服务器系统资源,提高系统的易用性和可扩展性。
还提供了一种基于HBase的接口构造系统,该系统包括:
存储和控制模块,其配置来使用mysql数据库对用户权限信息、通用接口服务的元数据信息进行存储和控制;
设置模块,其配置来设置通用接口服务;
控制模块,其配置来提供可视化系统,用于控制用户权限信息和通用接口信息;
对外模块,其配置来设置对外提供接口服务:根据用户的业务需求配置用户权限和接口访问信息,然后反馈给用户访问接口服务的URL。
附图说明
图1所示为根据本发明的基于HBase的接口构造方法的流程图。
具体实施方式
如图1所示,这种基于HBase的接口构造方法,该方法包括以下步骤:
(1)使用mysql数据库对用户权限信息、通用接口服务的元数据信息进行存储和控制;
(2)设置通用接口服务;
(3)配置控制模块:提供可视化系统,用于控制用户权限信息和通用接口信息;
(4)设置对外提供接口服务:根据用户的业务需求配置用户权限和接口访问信息,然后反馈给用户访问接口服务的URL。
本发明通过使用mysql数据库对用户权限信息、通用接口服务的元数据信息进行存储和控制,设置通用接口服务,配置用户权限信息和通用接口信息,根据业务需求和实际访问情况,合理部署服务,做好负载均衡,因此对于新增的业务需求,只需进行简单的配置,不需要再进行重复开发和部署服务的工作,就可以实现其对数据查询的需求,通用性好,而且充分利用服务器系统资源,提高系统的易用性和可扩展性。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京集奥聚合科技有限公司,未经北京集奥聚合科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611021940.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种智能匹配销售顾问和用户的方法及设备
- 下一篇:一种化妆品信息查询系统