[发明专利]搜索引擎中索引数据的更新方法、装置、电子设备及介质在审
申请号: | 202110800854.8 | 申请日: | 2021-07-15 |
公开(公告)号: | CN113553488A | 公开(公告)日: | 2021-10-26 |
发明(设计)人: | 陈先进;刘磊 | 申请(专利权)人: | 挂号网(杭州)科技有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/953 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 王瑞云 |
地址: | 311200 浙江省杭州市萧山区萧山*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 搜索引擎 索引 数据 更新 方法 装置 电子设备 介质 | ||
本发明实施例公开了一种搜索引擎中索引数据的更新方法、装置、电子设备及介质,其中,该方法包括:从与搜索引擎对应的数据库主库的数据库从库中,获取与所述搜索引擎的索引数据对应的至少一条增量扫描数据;基于每一条所述增量扫描数据在预设缓存空间中所记录的缓存时间信息,确定所述增量扫描数据是否为待更新增量数据;如果是,则基于所述待更新增量数据生成待更新文档,并将所述待更新文档提交至所述搜索引擎,以使所述搜索引擎基于所述待更新文档与所述搜索引擎中与所述待更新文档对应的已更新文档对所述索引数据进行更新。本发明实施例,通过上述方法,解决了老的数据覆盖掉最新数据问题,达到了搜索引擎中正确搜索到完整数据的效果。
技术领域
本发明实施例涉及数据处理技术领域,尤其涉及一种搜索引擎中索引数据的更新方法、装置、电子设备及介质。
背景技术
随着互联网业务的发展,很多业务场景需要搜索引擎实时更新索引数据。搜索引擎的索引数据需要基于支撑业务的数据库进行更新。出于对数据安全的考虑,在数据库架构中一般都会设置有数据库主库以及与数据库主库对应的数据库从库。其中,数据库从库为数据库主库的备份数据库,其数据由数据库主库同步得到。
目前,在数据库主库与数据库从库进行主从同步的过程中,往往会存在数据延迟的情况,因此,在搜索引擎已经实时更新为最新数据的情况下,如果后续从数据库从库中更新进来的数据为延迟的旧数据,可能会导致旧数据覆盖掉最新数据。
发明内容
本发明实施例提供了一种搜索引擎中索引数据的更新方法、装置、电子设备及介质,以实现防止老的数据覆盖掉最新数据的技术效果。
第一方面,本发明实施例提供了一种搜索引擎中索引数据的更新方法,该方法包括:
从与搜索引擎对应的数据库主库的数据库从库中,获取与所述搜索引擎的索引数据对应的至少一条增量扫描数据;
基于每一条所述增量扫描数据在预设缓存空间中所记录的缓存时间信息,确定所述增量扫描数据是否为待更新增量数据;
如果是,则基于所述待更新增量数据生成待更新文档,并将所述待更新文档提交至所述搜索引擎,以使所述搜索引擎基于所述待更新文档与所述搜索引擎中与所述待更新文档对应的已更新文档对所述索引数据进行更新。
第二方面,本发明实施例还提供了一种搜索引擎中索引数据的更新装置,该装置包括:
增量数据获取模块,用于从与搜索引擎对应的数据库主库的数据库从库中,获取与所述搜索引擎的索引数据对应的至少一条增量扫描数据;
待更新数据确定模块,用于基于每一条所述增量扫描数据在预设缓存空间中所记录的缓存时间信息,确定所述增量扫描数据是否为待更新增量数据;
待更新文档提交模块,用于如果是,则基于所述待更新增量数据生成待更新文档,并将所述待更新文档提交至所述搜索引擎,以使所述搜索引擎基于所述待更新文档与所述搜索引擎中与所述待更新文档对应的已更新文档对所述索引数据进行更新。
第三方面,本发明实施例还提供了一种电子设备,该电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明任意实施例所提供的搜索引擎中索引数据的更新方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现本发明任意实施例所提供的搜索引擎中索引数据的更新方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于挂号网(杭州)科技有限公司,未经挂号网(杭州)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110800854.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置