[发明专利]服务器集群数据迁移方法、装置、电子设备及存储介质在审
申请号: | 202011178237.0 | 申请日: | 2020-10-29 |
公开(公告)号: | CN114428770A | 公开(公告)日: | 2022-05-03 |
发明(设计)人: | 隆航 | 申请(专利权)人: | 深圳云天励飞技术股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21 |
代理公司: | 深圳驿航知识产权代理事务所(普通合伙) 44605 | 代理人: | 杨伦 |
地址: | 518000 广东省深圳市龙岗区园山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 服务器 集群 数据 迁移 方法 装置 电子设备 存储 介质 | ||
本发明涉及数据搜索领域,提供服务器集群数据迁移方法、装置、电子设备及存储介质,方法包括:通过读取线程读取原始搜索服务中同一数据表内的待迁移数据,所述读取线程的读取线程标识与所述待迁移数据的数据标识存在对应关系;将所述读取线程读取到的同一数据表内的待迁移数据加载到缓存中心暂存;若检测到推送线程获取到发送权限,则根据所述推送线程的推送线程标识与所述读取进程的读取线程标识对应关系,有序从所述缓存中心中拉取与所述数据标识对应的待迁移数据以发送到升级搜索服务中。本发明能够保证待迁移数据在迁移过程中的完整有序,迁移到升级搜索服务中更加集中的体现,利于数据搜索时获取到更完整的数据,以提高数据搜索准确率。
技术领域
本发明涉及数据搜索技术领域,尤其涉及服务器集群数据迁移方法、装置、电子设备及存储介质。
背景技术
在现有技术中,当对大量数据的搜索系统升级时,在迁移过程中由于搜索升级后的搜索系统有数据冷热概念,所以当升级前的搜索系统在数据迁移过程中由于线程的不确定性出现同一片数据分配在不同表上,即每条数据经过迁移后可能表现在不同地方,导致升级后的搜索系统在一张表的数据时间跨度非常大。当进行数据搜索时,难以在一个集中的位置进行完整的数据搜索,且迁移后的数据表现在不同地方会导致数据时会有数据丢失、不完整的情况,后续进行数据搜索时数据不完整会影响搜索结果的准确度。可见,现有技术中,存在数据迁移分配不合理、搜索结果准确率低的问题。
发明内容
本发明实施例提供一种服务器集群数据迁移方法,能够根据有序分配迁移的数据,保证数据完整有序进行迁移,提高数据搜索的准确率。
第一方面,本发明实施例提供一种服务器集群数据迁移方法,所述方法包括以下步骤:
通过读取线程读取原始搜索服务中同一数据表内的待迁移数据,所述读取线程的读取线程标识与所述待迁移数据的数据标识存在对应关系;
将所述读取线程读取到的同一数据表内的待迁移数据加载到缓存中心暂存;
若检测到推送线程获取到发送权限,则根据所述推送线程的推送线程标识与所述读取进程的读取线程标识对应关系,有序从所述缓存中心中拉取与所述数据标识对应的待迁移数据以发送到升级搜索服务中。
第二方面,本发明实施例还提供一种服务器集群数据迁移装置,包括:
读取模块,用于通过读取线程读取原始搜索服务中同一数据表内的待迁移数据,所述读取线程的读取线程标识与所述待迁移数据的数据标识存在对应关系;
存储模块,用于将所述读取线程读取到的同一数据表内的待迁移数据加载到缓存中心暂存;
推送模块,用于若检测到推送线程获取到发送权限,则根据所述推送线程的推送线程标识与所述读取进程的读取线程标识对应关系,有序从所述缓存中心中拉取与所述数据标识对应的待迁移数据以发送到升级搜索服务中。
第三方面,本发明实施例还提供一种电子设备,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现所述实施例提供的服务器集群数据迁移方法中的步骤。
第四方面,一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现所述实施例提供的服务器集群数据迁移方法中的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳云天励飞技术股份有限公司,未经深圳云天励飞技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011178237.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置