[发明专利]一种数据搜索方法和装置

说明书

本发明实施例提供一种数据搜索方法和装置，该方法包括接收应用服务器发送的数据搜索请求；根据所述数据搜索请求调用磁盘全量索引对应的第一索引读取器和内存增量索引对应的第二索引读取器；通过所述第一索引读取器和所述第二索引读取器进行数据并行搜索，并对通过所述第一索引读取器基于所述磁盘全量索引搜索到的数据信息进行去重处理；将去重处理结果和通过所述第二索引读取器基于所述内存增量索引搜索到的数据信息进行合并作为搜索结果；将所述搜索结果发送给所述应用服务器进行显示。本发明给出的数据搜索方法采用并行搜索方式，既能提高数据搜索效率，又能保证数据搜索结果的实时性和准确性。

技术领域

本发明涉及数据搜索技术领域，具体而言，涉及一种数据搜索方法和装置。

背景技术

数据搜索是信息领域非常核心的功能，通过搜索可以迅速定位到用户所需要的信息，但是目前的数据搜索大部分是非实时的，即采用定时更新索引的方式实现数据更新和搜索，从而造成很多需要进行实时数据的搜索过程无法完成。

发明内容

有鉴于此，本发明实施例的目的在于提供一种数据搜索方法和装置，能够有效改善上述问题。

一方面，本发明较佳实施例提供了一种数据搜索方法，应用于数据搜索服务器，所述方法包括：

接收应用服务器发送的数据搜索请求；

根据所述数据搜索请求调用磁盘全量索引对应的第一索引读取器和内存增量索引对应的第二索引读取器；

通过所述第一索引读取器和所述第二索引读取器进行数据并行搜索，并对通过所述第一索引读取器基于所述磁盘全量索引搜索到的数据信息进行去重处理；

将去重处理结果和通过所述第二索引读取器基于所述内存增量索引搜索到的数据信息进行合并作为搜索结果；

将所述搜索结果发送给所述应用服务器进行显示。

进一步地，将通过所述第一索引读取器基于所述磁盘全量索引搜索到的数据信息进行去重处理的步骤包括：

获取用于保存删除数据的删除ID列表，并将该删除ID列表添加至所述第一索引读取器；

根据所述删除ID列表从所述第一索引读取器搜索到的数据信息中删除与该删除ID列表对应的数据信息。

进一步地，所述方法还包括：

接收所述应用服务器发送的实时更新数据；

将所述实时更新数据写入待更新数据队列以使所述第二索引读取器读取该实时更新数据并将其更新到内存增量索引中；

判断所述内存增量索引是否满足新建条件，若满足，则删除当前内存增量索引，并进行新的内存增量索引的创建；

在完成新的内存增量索引的创建后对所述第二索引读取器进行更新。

进一步地，判断所述内存增量索引是否满足新建条件的步骤包括：

判断当前时间点是否为所述内存增量索引的预设维护时间点；或者

判断所述内存增量索引中包含的索引数量是否达到预设值。

进一步地，所述方法还包括：

按照预设时间间隔启动磁盘全量索引定时维护任务，并从数据库服务器中获取待做索引表和待更新数据列表；

根据所述待更新数据列表从所述数据库服务器中获取对应的待更新数据源；

将所述待更新数据源写入磁盘全量索引中，并将所述磁盘全量索引的写入结果写入所述待做索引表；

对所述第一索引读取器进行更新，并删除当前内存增量索引。