[发明专利]数据查询系统及方法、电子设备、存储介质在审

专利信息
申请号: 202010067053.0 申请日: 2020-01-20
公开(公告)号: CN113139008A 公开(公告)日: 2021-07-20
发明(设计)人: 安海雄 申请(专利权)人: 北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司
主分类号: G06F16/2458 分类号: G06F16/2458;G06F16/22
代理公司: 北京律智知识产权代理有限公司 11438 代理人: 王辉;阚梓瑄
地址: 100176 北京市北京经济技术*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 查询 系统 方法 电子设备 存储 介质
【说明书】:

本公开提供一种数据查询系统及方法、电子设备、存储介质;涉及大数据技术领域。所述系统包括:SDK模块,用于获取查询信息,将查询信息通过路由模块发送至后台管理模块;一个或多个路由模块,用于将业务数据路由至多个elasticsearch集群;后台管理模块,用于根据接收到的查询信息,确定待查询数据;根据数据与elasticsearch集群的映射关系,确定待查询数据对应的目标elasticsearch集群;路由模块,还用于从目标elasticsearch集群中查询待查询数据;多个elasticsearch集群,用于存储业务数据。本公开可以降低应用层开发的复杂度,提高开发效率。

技术领域

本公开涉及大数据技术领域,具体而言,涉及一种数据查询系统、数据查询方法、电子设备以及计算机可读存储介质。

背景技术

大数据技术为各行各业带来了突飞猛进的发展,大数据分析给电商行业带来了巨大的商业价值。相关技术中,可以将elasticsearch作为存储引擎和查询引擎,通过elasticsearch进行数据查询。然而,在数据规模较大时,需要在应用层根据业务字段进行分集群、分索引管理,导致应用层开发的复杂度较高,开发效率较低。

需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种数据查询系统、数据查询方法、电子设备以及计算机可读存储介质,进而在一定程度上克服由于相关技术的限制和缺陷而导致的在大规模数据查询时,应用层开发的复杂度较高,开发效率较低的问题。

根据本公开的第一方面,提供一种数据查询系统,包括:软件开发工具包SDK模块、一个或多个路由模块、后台管理模块和多个elasticsearch集群;

所述SDK模块,用于获取查询信息,将所述查询信息通过所述路由模块发送至所述后台管理模块;

所述路由模块,用于将业务数据路由至所述多个elasticsearch集群;

所述后台管理模块,用于根据接收到的查询信息,确定待查询数据;根据数据与elasticsearch集群的映射关系,确定所述待查询数据对应的目标elasticsearch集群;

所述路由模块,还用于从所述目标elasticsearch集群中查询所述待查询数据;

所述多个elasticsearch集群,用于存储所述业务数据。

可选的,所述路由模块为可插拔模块。

可选的,所述路由模块具体用于对所述业务数据进行分组,得到多个分组数据,并将所述多个分组数据路由至所述多个elasticsearch集群。

可选的,所述路由模块具体用于确定单个分组数据分别对应的elasticsearch集群以及elasticsearch集群的索引,建立分组数据、elasticsearch集群和索引之间的映射关系表。

可选的,所述后台管理模块具体用于根据接收到的查询信息,确定所述待查询数据对应的各目标分组数据,获取并根据所述映射关系表,确定所述各目标分组数据对应的所述目标elasticsearch集群,以及所述目标elasticsearch集群的目标索引。

可选的,所述路由模块具体用于从所述各目标分组数据对应的所述目标elasticsearch集群的目标索引中查询所述各目标分组数据。

可选的,所述路由模块具体用于通过哈希算法将所述多个分组数据路由至所述多个elasticsearch集群。

可选的,针对单个分组数据,该分组数据对应一个elasticsearch集群的一个或多个索引。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司,未经北京沃东天骏信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010067053.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top