[发明专利]一种分布式NewSQL数据库系统和全文检索方法有效
申请号: | 201710580435.1 | 申请日: | 2017-07-17 |
公开(公告)号: | CN107480198B | 公开(公告)日: | 2020-05-19 |
发明(设计)人: | 晋彤;谭恒亮 | 申请(专利权)人: | 云润大数据服务有限公司 |
主分类号: | G06F16/24 | 分类号: | G06F16/24;G06F16/25;G06F16/27 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 梁顺宜;郝传鑫 |
地址: | 510000 广东省广州市天*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 newsql 数据库 系统 全文 检索 方法 | ||
本发明公开了一种分布式NewSQL数据库系统,包括:控制单元,用于以数据库接口的方式接入用户请求,并将所述用户请求发送给计划单元;还用于将查询结果返回用户;其中,所述用户请求包括查询条件;计划单元,用于解析所述用户请求,编译以及生成对应的执行计划;执行单元,用于根据执行计划,将所述查询条件从SQL条件语句转换成SOLR的查询表达式,然后根据所述SOLR的查询表达式查询索引表,获取对应的索引数据;并根据获取的所述索引数据查询数据表,获得对应的查询结果;并返回查询结果至控制单元;Hbase单元,用于储存所述数据表;Solr单元,用于储存所述索引表。本发明还公开了全文检索方法。本发明支持分布式全文检索,满足用户创建全文索引的需求。
技术领域
本发明涉及大数据技术领域,尤其涉及一种分布式NewSQL数据库系统和全文检索方法。
背景技术
目前Hbase单元是Hadoop生态体系中最著名的分布式NoSQL数据库之一。其设计理念来源于Google的Bigtable。Hbase单元主要组件包括HMaster和HRegionsever,为用户提供表格类型的数据模型,按主键范围划分为多个region,HMaster负责管理和分配region,HRegionserver负责region数据的读写。Hbase单元的优点使其成为目前应用最广泛的分布式NoSQL数据库之一,随着越来越多的应用尝试迁移到Hbase单元上,但Hbase单元只支持基于主键的查询,并不支持全文检索,给很多应用带来了不便。
发明内容
本发明实施例的目的是提供一种分布式NewSQL数据库系统和全文检索方法,通过Solr支持分布式全文检索,支持非主键的查询,满足用户全文检索的需求。
为实现上述目的,本发明实施例提供了一种分布式NewSQL数据库系统,包括:
控制单元,用于以数据库接口的方式接入用户请求,并将所述用户请求发送给计划单元;还用于将查询结果返回用户;其中,所述用户请求包括全文检索的查询条件;
计划单元,用于解析所述用户请求,编译以及生成对应的执行计划;
执行单元,用于根据执行计划,将所述查询条件从SQL条件语句转换成SOLR的查询表达式,然后根据所述SOLR的查询表达式查询索引表,获取对应的索引数据;并根据获取的所述索引数据查询数据表,从而获得对应的所述查询结果;并返回查询结果至所述控制单元;
Hbase单元,用于储存所述数据表;其中,所述数据表中存有全文检索的数据字段;
Solr单元,用于储存所述索引表;其中,所述索引表中存有由根据所述全文检索的数据字段的描述所生成的倒排索引形式的索引数据。
与现有技术相比,本发明公开的一种分布式NewSQL数据库系统,通过控制单元以数据库接口的方式接入用户请求,并将所述用户请求发送给计划单元;通过计划单元解析所述用户请求,编译以及生成对应的执行计划;通过执行单元根据执行计划,根据执行计划,将所述查询条件从SQL条件语句转换成SOLR的查询表达式,然后根据所述SOLR的查询表达式查询索引表,获取对应的索引数据;并根据获取的所述索引数据查询数据表,从而获得对应的所述查询结果,并返回查询结果至所述控制单元;最后,通过控制单元将处理结果返回用户的技术方案,基于Solr单元实现全文检索,以支持分布式全文检索,支持用户非主键查询,满足用户全文检索的需求,提高用户体验。
进一步的,还包括:
分布式事务管理器,用于当所述执行计划中涉及事务时,协调所述执行计划中的多方完成分布式事务管理。
进一步的,所述Hbase单元还包括Hbase单元API接口,所述执行单元用于根据获取的所述索引数据通过所述Hbase单元API接口查询数据表,从而获得对应的所述查询结果。
进一步的,所述数据库接口为JDBC或ODBC。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于云润大数据服务有限公司,未经云润大数据服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710580435.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:实体词识别方法及装置
- 下一篇:数据库的查询重构方法、装置、设备及存储介质