[发明专利]一种分页检索方法及装置

说明书

本发明的实施例公开一种分页检索方法及装置，涉及分页检索技术，能够提升分页检索效率。包括：接收分页检索请求，所述分页检索请求包含排序条件、分页条件以及过滤条件；确定与所述过滤条件匹配的分片集的各个分片的匹配记录数，所述分片集为依照预设排序条件建立的预设分片库中的分片的集合；基于所述排序条件、所述分页条件和所述分片集的各个分片的匹配记录数，从所述分片集的分片中获取相应的匹配记录，作为分页检索结果，用于对支持排序的分布式数据进行深度分页检索。

技术领域

本发明涉及分页检索技术，尤其涉及一种分页检索方法及装置。

背景技术

随着计算机通信以及互联网技术的不断发展，电子设备的应用越来越普遍，例如，智能移动电话、个人数字助理、掌上电脑、笔记本电脑得到了越来越广泛的应用，成为用户日常生活和工作中不可或缺的一部分。例如，利用电子设备进行网络互联，通过输入搜索关键词，可以搜索出用户需要的数据。

由于搜索出的数据量大，在向用户展示搜索结果时，需要使用分页技术。在计算机数据处理领域中，分页技术是一种将所有数据分段展示给用户的技术，即当查询结果总数较多时，根据指定页码和每页记录数，排序后返回符合上述条件指定范围的数据记录集合，用户看到的不是全部数据，而是其中的一部分，如果在其中没有找到自己想要的数据，可以通过指定页码或是翻页的方式转换搜索到的数据，直到找到所需的数据为止。

从应用角度来看，一方面分布式数据库导致数据集越来越分散，待排序的数据量越来越大，另一方面对系统的快速响应要求越来越高。对于数据体量较大超过1亿条记录的应用，当前性能和普及性最高的是分布式全文检索技术，其中，全文检索技术采用倒排索引的方式创建索引并通过索引检索，同时支持排序和分页，对于需要排序的分页请求(该分页请求包括过滤条件、排序条件和页码条件)，其检索流程为在各个服务器的分片内，将符合过滤条件的记录按照排序条件排序后，然后从每个分片的排序后的记录中，选择符合页码条件的记录拉取到一台汇聚服务器，再在该汇聚服务器上对所有分片的记录按照分页请求中的排序条件进行重新排序，然后选择符合页码条件的记录形成分页，作为检索结果返回给电子设备(检索端)。

但上述全文检索技术，由于需要在各服务器先进行检索排序，然后汇聚到服务器再进行重新排序，当每个分片中符合页码条件的记录总数较小(或分页请求指定的页数)较小时，可以快速响应；但当每个分片中符合页码条件的记录(或者分页请求中指定的页数)总数较大时，汇聚到服务器中的记录会成倍增加，进而导致缓存和计算资源的使用量倍增，响应速度变慢，使得分页检索效率较低，从而影响整个分布式检索系统的性能和稳定性。

发明内容

有鉴于此，本发明实施例提供一种分页检索方法及装置，能够提升分页检索效率，以解决相关的分页检索方法中，分页检索效率较低的问题。

第一方面，本发明实施例提供一种分页检索方法，包括：

接收分页检索请求，所述分页检索请求包含排序条件、分页条件以及过滤条件；

确定与所述过滤条件匹配的分片集的各个分片的匹配记录数，所述分片集为依照预设排序条件建立的预设分片库中的若干分片的集合；

基于所述排序条件、所述分页条件和所述分片集的各个分片的匹配记录数，从所述分片集的分片中获取相应的匹配记录，作为分页检索结果。

结合第一方面，在第一方面的第一种实施方式中，确定与所述过滤条件匹配的分片集的各个分片的匹配记录数，包括：

判断缓存中是否存在与所述过滤条件匹配的检索记录：

在所述缓存中不存在与所述过滤条件匹配的检索记录时，将所述预设分片库中与所述过滤条件匹配的分片，作为所述分片集；

向所述分片集的各个分片发送查询请求，获取所述分片集的每个分片中符合所述过滤条件的匹配记录数。