[发明专利]数据查询方法、装置、电子设备及存储介质

说明书

本公开关于一种数据查询方法、装置、电子设备及存储介质，该方法应用于分布式数据库中的主节点，该方法包括：接收数据查询请求；所述数据查询请求携带有查询参数；基于所述查询参数，在所述从节点中选取出目标从节点，并构建所述目标从节点对应的查询子任务；所述查询子任务用于在所述目标从节点中查询出与所述查询参数相关的初始数据；接收所述目标从节点执行所述查询子任务后返回的所述初始数据；基于所述数据查询请求携带的所述查询参数和所述目标从节点返回的所述初始数据，确定出所述数据查询请求对应的目标数据。本公开提供的技术方案有效减少从节点和主节点间的数据移动，降低数据传输消耗，提高查询效率。

技术领域

本公开涉及数据处理技术，尤其涉及一种数据查询方法、装置、电子设备及存储介质。

背景技术

在大数据时代背景下，数据规模越来越大，数据查询变得越来越重要。目前，在对海量数据进行查询，如TOP N查询时，通常需要获取到全量数据，并将获取到全量数据存储在一张新的数据表中，然后再对数据表中的全量数据进行排序，以选取出所需的数据。如此会消耗较多的数据库的传输资源，导致查询效率不高。

发明内容

本公开提供一种数据查询方法、装置、电子设备及存储介质，以至少解决相关技术对海量数据进行查询时查询效率不高的问题。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种数据查询方法，应用于分布式数据库中的主节点，所述分布式数据库还包括与所述主节点连接的从节点，所述从节点用于存储数据；所述方法包括：

接收数据查询请求；所述数据查询请求携带有查询参数；

基于所述查询参数，在所述从节点中选取出目标从节点，并构建所述目标从节点对应的查询子任务；所述查询子任务用于在所述目标从节点中查询出与所述查询参数相关的初始数据；

接收所述目标从节点执行所述查询子任务后返回的所述初始数据；

基于所述数据查询请求携带的所述查询参数和所述目标从节点返回的所述初始数据，确定出所述数据查询请求对应的目标数据。

可选地，所述查询参数包括查询指标、查询维度和查询数据源，所述基于所述查询参数，构建所述目标从节点对应的查询子任务，包括：

以所述查询数据源作为所述查询子任务的数据源参数；

以所述查询维度作为所述查询子任务的分组参数；

基于所述查询指标，确定所述查询子任务的指标参数和排序参数；

获取预设数值作为所述查询子任务的限制输出参数，所述限制输出参数用于确定所述初始数据的数量；

将所述数据源参数、所述分组参数、所述指标参数、所述排序参数和所述限制输出参数写入预设查询语句模板，构建所述目标从节点对应的查询子任务。

可选地，所述查询参数还包括第一过滤条件；所述方法还包括：

以所述第一过滤条件作为所述查询子任务的过滤参数；

所述构建所述目标从节点对应的查询子任务，包括：

将所述数据源参数、所述分组参数、所述过滤参数、所述指标参数和所述排序参数、所述限制输出参数写入预设查询语句模板，构建所述目标从节点对应的查询子任务。

可选地，所述基于所述查询指标，确定所述查询子任务的指标参数，包括：

在所述查询指标不包括聚合算子的情况下，以所述查询指标作为所述查询子任务的指标参数；

在所述查询指标包括聚合算子的情况下，对所述查询指标进行拆解，将拆解得到的不包括聚合算子的至少两个拆解指标作为所述查询子任务的指标参数。