[发明专利]一种数据同步方法、装置、系统、服务器和存储介质

说明书

本发明实施例公开了一种数据同步方法、装置、系统、服务器和存储介质，该方法包括：将数据库中的全量数据加载并发送至离线服务器，以使离线服务器获得多个索引子文件；控制离线服务器对多个索引子文件进行合并，生成目标索引文件；对至少两个搜索服务器集群中待同步的当前搜索服务器集群进行切流，以使当前查询请求由其他搜索服务器集群进行响应处理；基于目标索引文件，对当前搜索服务器集群中的当前搜索服务器进行数据同步。通过本发明实施例的技术方案，可以在不影响查询性能的提前下对搜索服务器进行全量索引的数据同步。

技术领域

本发明实施例涉及互联网技术，尤其涉及一种数据同步方法、装置、系统、服务器和存储介质。

背景技术

随着互联网技术的快速发展，可以利用搜索服务器对海量数据进行搜索查询，获得用户所需要的信息。

通常，在索引初始化时、索引结构发生变更时、索引出现大面积数据误差时都需要对搜索服务器进行全量索引，也就是将数据库中的全量数据进行提取组装后写入搜索服务器中，以便保证数据库中的数据与索引的数据之间的一致性和完整性。

目前，通常是对正在提供搜素服务的搜索服务器进行全量索引的数据同步。然而，由于索引数据量过大，使得搜索服务器的写入操作会非常频繁，从而会占用较多资源，使得用于查询的资源较少，大大降低了查询性能。

发明内容

本发明实施例提供了一种数据同步方法、装置、系统、服务器和存储介质，以在不影响查询性能的提前下对搜索服务器进行全量索引的数据同步。

第一方面，本发明实施例提供了一种数据同步方法，应用于控制服务器，包括：

将数据库中的全量数据加载并发送至离线服务器，以使所述离线服务器获得多个索引子文件；

控制所述离线服务器对多个所述索引子文件进行合并，生成目标索引文件；

对至少两个搜索服务器集群中待同步的当前搜索服务器集群进行切流，以使当前查询请求由其他搜索服务器集群进行响应处理；

基于所述目标索引文件，对所述当前搜索服务器集群中的当前搜索服务器进行数据同步。

第二方面，本发明实施例还提供了一种数据同步装置，集成于控制服务器，包括：

数据加载模块，用于将数据库中的全量数据加载并发送至离线服务器，以使所述离线服务器获得多个索引子文件；

合并控制模块，用于控制所述离线服务器对多个所述索引子文件进行合并，生成目标索引文件；

集群切流模块，用于对至少两个搜索服务器集群中待同步的当前搜索服务器集群进行切流，以使当前查询请求由其他搜索服务器集群进行响应处理；

数据同步模块，用于基于所述目标索引文件，对所述当前搜索服务器集群中的当前搜索服务器进行数据同步。

第三方面，本发明实施例还提供了一种数据同步系统，所述系统包括：控制服务器、离线服务器和至少两个搜索服务器集群；

其中，所述控制服务器用于实现如本发明任意实施例所提供的数据同步方法。

第四方面，本发明实施例还提供了一种控制服务器，所述控制服务器包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所提供的数据同步方法。

第五方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所提供的数据同步方法。