[发明专利]Elasticsearch分页查询数据的方法及装置

权利要求书

1.一种Elasticsearch分页查询数据的方法，其特征在于，包括：

获取预设的数据查询条件，其中，所述数据查询条件包括：查询字段和查询周期；

根据所述数据查询条件，启动一个定时任务，其中，所述定时任务用于定时从Elasticsearch中，批量查询每个查询周期内满足所述查询字段的数据，存入预设数据库中，得到多个数据块，每个数据块包含的数据量不超过预设阈值；

接收对指定分页的数据查询请求，并根据对所述指定分页的数据查询请求，从所述预设数据库的多个数据块中，查找存储所述指定分页的数据的目标数据块；

从所述目标数据块上，查询所述指定分页的数据；

在获取预设的数据查询条件之后，所述方法还包括：

根据所述数据查询条件中包含的各个查询字段，生成一个或多个字段组合关系；

创建每个字段组合关系的标识信息；

根据每个字段组合关系的标识信息，记录每个字段组合关系在各个查询周期内对应一个或多个数据块的数据块信息。

2.如权利要求1所述的方法，其特征在于，所述数据查询请求中包含：分页大小和指定分页的页码数，其中，接收对指定分页的数据查询请求，并根据对所述指定分页的数据查询请求，从所述预设数据库的多个数据块中，查找存储所述指定分页的数据的目标数据块，包括：

根据数据查询请求中包含的分页大小和页码数，确定所述指定分页的数据条目范围；

遍历所述预设数据库中的每个数据块，根据每个数据块的数据条目范围和所述指定分页的数据条目范围，查找存储所述指定分页的数据的数据块。

3.如权利要求2所述的方法，其特征在于，从所述目标数据块上，查询所述指定分页的数据，包括：

采用Elasticsearch的from+size分页查询方式，根据数据查询请求中包含的分页大小和页码数，从所述目标数据块上查询所述指定分页的数据。

4.如权利要求1所述的方法，其特征在于，每个数据块的数据块信息包括如下任意之一：每个数据块的索引信息、每个数据块上存储的数据条目范围、每个数据块对应的累计数据条目范围，每个数据块上第一个数据和最后一个数据的查询时刻。

5.如权利要求1所述的方法，其特征在于，创建每个字段组合关系的标识信息，包括：

获取每个字段组合关系的表达式；

计算每个字段组合关系表达式的哈希值；

将每个字段组合关系表达式的哈希值，作为每个字段组合关系的标识信息。

6.如权利要求1至5任一项所述的方法，其特征在于，在从所述目标数据块上，查询所述指定分页的数据之后，所述方法还包括：

根据所述数据查询请求，返回所述指定分页的数据。

7.一种Elasticsearch分页查询数据的装置，其特征在于，包括：

配置模块，用于获取预设的数据查询条件，其中，所述数据查询条件包括：查询字段和查询周期；

数据预存储模块，用于根据所述数据查询条件，启动一个定时任务，其中，所述定时任务用于定时从Elasticsearch中，批量查询每个查询周期内满足所述查询字段的数据，存入预设数据库中，得到多个数据块，每个数据块包含的数据量不超过预设阈值；

数据请求模块，用于接收对指定分页的数据查询请求，并根据对所述指定分页的数据查询请求，从所述预设数据库的多个数据块中，查找存储所述指定分页的数据的目标数据块；

数据查询模块，用于从所述目标数据块上，查询所述指定分页的数据；

还包括：数据处理模块，用于根据数据查询条件中包含的各个查询字段，生成一个或多个字段组合关系；创建每个字段组合关系的标识信息；根据每个字段组合关系的标识信息，记录每个字段组合关系在各个查询周期内对应一个或多个数据块的数据块信息。

8.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6任一项所述Elasticsearch分页查询数据的方法。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至6任一项所述Elasticsearch分页查询数据的方法的计算机程序。