[发明专利]基于Hbase数据库的多条件搜索方法及装置有效
申请号: | 201710370179.3 | 申请日: | 2017-05-23 |
公开(公告)号: | CN107239517B | 公开(公告)日: | 2020-09-29 |
发明(设计)人: | 刘占春;刘金财;王涛;齐博 | 申请(专利权)人: | 中国联合网络通信集团有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/28;G06F16/22 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 杨文娟;刘芳 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 hbase 数据库 条件 搜索 方法 装置 | ||
本发明提供了一种基于Hbase数据库的多条件搜索方法及装置,该方法包括:接收用户通过终端设备输入的多个搜索字段;判断是否存在与多个搜索字段对应的多条件组合键值对关系;若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合;根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。能够通过分布式搜索引擎进行一级索引,并通过任一字段的键值对关系在Hbase数据库中进行二级索引,提升了整个多条件组合搜索的效率,并且减少了多条件组合搜索的成本。
技术领域
本发明实施例涉及大数据处理技术领域,尤其涉及一种基于Hbase数据库的多条件搜索方法及装置。
背景技术
随着互联网和大数据技术的发展,传统的关系数据库已无法满足大数据的存储和使用需求,因此非关系型数据库HBase应运而生。该Hbase数据库具有海量数据的存储和线性扩展能力,所以非常适用于大数据的存储和使用需求。
现有的HBase数据库,通过建立键值对关系进行数据的搜索,对于没有键值对关系的多条件组合搜索,需要全表扫描,使对数据的搜索效率低下。为了提高多条件组合搜索的效率,需要事先建立各种多条件组合键值对关系,如果组合查询条件发生变化,需要重新设计和生成对应的多条件组合键值对关系,使多条件组合搜索的成本较高,并且搜索效率较低。
发明内容
本发明实施例提供一种基于Hbase数据库的多条件搜索方法及装置,解决了现有技术中的基于HBase数据库的多条件组合的搜索方法使多条件组合搜索的成本较高,并且搜索效率较低的技术问题。
本发明实施例提供一种基于Hbase数据库的多条件搜索方法,包括:
接收用户通过终端设备输入的多个搜索字段;
判断是否存在与所述多个搜索字段对应的多条件组合键值对关系;
若不存在与所述多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合;
根据所述记录集合的每个记录中的任一字段的键值对关系从所述Hbase数据库中读取对应的完整数据。
本发明实施例提供一种基于Hbase数据库的多条件搜索装置,包括:
接收模块,用于接收用户通过终端设备输入的多个搜索字段;
判断模块,用于判断是否存在与所述多个搜索字段对应的多条件组合键值对关系;
分布式引擎一级搜索模块,用于若不存在与所述多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据所述多个搜索字段进行搜索,并输出满足所述多个搜索字段的记录集合;
Hbase数据库二级搜索模块,用于根据所述记录集合的每个记录中的任一字段的键值对关系从所述Hbase数据库中读取对应的完整数据。
本发明实施例提供一种基于Hbase数据库的多条件搜索方法及装置,通过接收用户通过终端设备输入的多个搜索字段;判断是否存在与多个搜索字段对应的多条件组合键值对关系;若不存在与多个搜索字段对应的多条件组合键值对关系,则通过分布式搜索引擎根据多个搜索字段进行搜索,并输出满足多个搜索字段的记录集合;根据记录集合的每个记录中的任一字段的键值对关系从Hbase数据库中读取对应的完整数据。能够通过分布式搜索引擎进行一级索引,并通过任一字段的键值对关系在Hbase数据库中进行二级索引,将多条件组合搜索方法采用两级索引的方式进行搜索,由于每一级索引均能提高搜索效率,进而提升了整个多条件组合搜索的效率,并且不依赖于多条件组合键值对关系进行的搜索,所以减少了多条件组合搜索的成本。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国联合网络通信集团有限公司,未经中国联合网络通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710370179.3/2.html,转载请声明来源钻瓜专利网。