[发明专利]数据同步方法、装置、设备及存储介质在审
| 申请号: | 202310238142.0 | 申请日: | 2023-03-07 |
| 公开(公告)号: | CN116226284A | 公开(公告)日: | 2023-06-06 |
| 发明(设计)人: | 王政远;李翔 | 申请(专利权)人: | 北京人大金仓信息技术股份有限公司 |
| 主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/18 |
| 代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 陈希;黄健 |
| 地址: | 100102 北京市朝阳区容*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 同步 方法 装置 设备 存储 介质 | ||
本公开提供一种数据同步方法、装置、设备及存储介质。该方法包括:基于目标数据库中的第一预写式日志和源数据库中的第二预写式日志,确定第二预写式日志中的分叉点位置及分叉点位置对应的时间线;将第二预写日志中位于分叉点之后的日志记录,确定为待同步日志;基于待同步日志,将源数据库中的数据库数据同步到目标数据库。本公开解决了现有技术中异常恢复数据库服务器的数据同步时间较长、效率较低的问题,显著减小了异常恢复数据库服务器所需要同步的预写式日志体积,进而显著节省同步时间,提升同步效率。
技术领域
本公开涉及数据库管理技术领域,尤其涉及一种数据同步方法、装置、设备及存储介质。
背景技术
随着云计算技术的发展,通过云服务器中的数据库以满足远程计算要求,成为主要发展趋势。为保证云计算所需数据库数据的安全性,通常会将多个数据库服务器互为备份,形成数据库集群,以保证在任意一个数据库服务器出现异常时,数据库集群能够直接切换为备份,而不影响对远程调度命令的响应。但当任一数据库服务器出现异常并恢复时,其数据库时间线容易与其他数据库服务器中的数据库时间线出现差异,即出现时间线分叉或者数据分叉的情况,此时就需要基于其他数据库服务器对异常恢复的数据库服务器进行数据同步,以解决分叉问题。
现有技术中,解决分叉问题主要是基于其他数据库服务器中的预写式日志确定分叉所在位置,并将因分叉而存在差异的数据库数据和所有预写式日志均进行同步,以保证所有相关数据的一致性,但由此造成同步的数据量较大,同步时间长,效率低的问题。
发明内容
本公开提供了一种数据同步方法、装置、设备及存储介质,以解决现有技术中异常恢复数据库服务器的数据同步时间较长、效率较低的问题。
第一方面,本公开提供了一种数据同步方法,数据同步方法包括:
基于目标数据库中的第一预写式日志和源数据库中的第二预写式日志,确定第二预写式日志中的分叉点位置及分叉点位置对应的时间线;
将第二预写日志中位于分叉点之后的日志记录,确定为待同步日志;
基于待同步日志,将源数据库中的数据库数据同步到目标数据库。
可选地,第二预写式日志中包括时间线和与时间线对应的日志记录;基于目标数据库中的第一预写式日志和源数据库中的第二预写式日志,确定第二预写式日志中的分叉点位置及分叉点位置对应的时间线,包括:对比第一预写式日志和第二预写式日志,确定第一预写式日志与第二预写式日志中出现的分叉点对应第二预写式日志中的时间线所在位置;基于第二预写式日志中分叉点对应的时间线和日志记录,确定分叉点位置及分叉点位置对应的时间线。
可选地,日志记录包括用于执行数据库命令的检查记录,检查记录所在位置为检查点,对比第一预写式日志和第二预写式日志,确定第一预写式日志与第二预写式日志中出现的分叉点在第二预写式日志中的位置,包括:将第一预写式日志和第二预写式日志之间时间线存在差异的第二预写式日志中的日志记录所在位置,确定为分歧点;将第二预写式日志中位于分歧点之前一行的日志记录所在位置,确定为一致点;将第二预写式日志中一致点以前且到一致点距离最近的检查点确定为分叉点。
可选地,基于第二预写式日志中分叉点对应的时间线和日志记录,确定分叉点位置及分叉点位置对应的时间线,包括:确定所有第一预写式日志与第二预写式日志间的分叉点在第二预写式日志的日志记录所在位置和每个分叉点对应的时间线;基于分叉点的先后顺序,将最先出现的分叉点的日志记录所在位置和对应时间线确定为分叉点位置及分叉点位置对应的时间线。
可选地,将第二预写日志中位于分叉点之后的日志记录,确定为待同步日志,包括:将第二预写式日志中时间线位于分叉点位置中的时间线以后,或者时间线与分叉点位置中的时间线相同且日志记录所在位置位于分叉点位置中的日志记录所在位置之后的日志记录及对应时间线,确定为待同步日志。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京人大金仓信息技术股份有限公司,未经北京人大金仓信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310238142.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





