[发明专利]数据同步处理方法、电子设备以及存储介质在审
| 申请号: | 202010609672.8 | 申请日: | 2020-06-29 |
| 公开(公告)号: | CN113934745A | 公开(公告)日: | 2022-01-14 |
| 发明(设计)人: | 李磊;朱业 | 申请(专利权)人: | 中兴通讯股份有限公司 |
| 主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/22;G06F16/27 |
| 代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 谭晓欣 |
| 地址: | 518057 广东省深圳市*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 同步 处理 方法 电子设备 以及 存储 介质 | ||
本发明公开了一种数据同步处理方法、电子设备以及存储介质,所述方法包括主节点接收客户端发送的SQL语句;生成SQL执行计划;将所述SQL执行计划发送给从节点;执行所述SQL执行计划;获取所述主节点的第一增量日志,对所述第一增量日志的数据进行哈希计算,得到第一哈希值;接收每个所述从节点发送的第二哈希值,根据所述第一哈希值和所述第二哈希值确定同步结果。本发明实施例的方案,一方面,主节点和从节点同时执行SQL执行计划,实现了对主节点和从节点进行并行式的同步复制,大大提高了数据库同步处理的效率,减少数据的延迟;另一方面,通过哈比算法对主节点和节点的增量日志进行对比,根据对比结果确定同步结果,能够保证数据同步的一致性。
技术领域
本发明涉及分布式数据库技术领域,特别是涉及一种数据同步处理方法、电子设备以及存储介质。
背景技术
现有的分布式数据库的数据同步方案主要有异步复制、全同步复制和半同步复制三种。其中,异步复制方案对数据库的执行效率影响最小,但容易出现主节点和从节点之间数据不一致的情况;全同步复制方案虽然能保证主节点和从节点之间数据同步的一致性,但是对分布式数据库系统的性能影响很大,效率较低,不适用于高并发应用场景;半同步复制方案虽然兼顾了效率和数据一致性,但仍然存在至少一个增量日志同步落盘周期的数据延迟。
发明内容
以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。
本发明实施例提供了一种数据同步处理方法、电子设备以及存储介质,能够确保数据同步的一致性和提升数据同步效率。
一方面,本发明实施例提供了一种数据同步处理方法,应用于主节点,所述方法包括:
接收客户端发送的结构化查询语言SQL语句;
对所述SQL语句进行解析并生成SQL执行计划,并将所述SQL执行计划发送给至少一个从节点;
执行所述SQL执行计划;
获取所述主节点执行所述SQL执行计划时产生的第一增量日志,对所述第一增量日志的数据进行哈希计算,得到第一哈希值;
接收每个所述从节点发送的第二哈希值,其中,所述第二哈希值是对所述从节点执行所述SQL执行计划时产生的第二增量日志的数据进行哈希计算得到;
根据所述第一哈希值和所述第二哈希值确定同步结果;
根据所述同步结果发送操作结果信息给所述客户端。
另一方面,本发明实施例提供了一种数据同步处理方法,应用于主节点,所述方法包括:
接收客户端发送的结构化查询语言SQL语句;
将所述SQL语句发送给至少一个从节点;
对所述SQL语句进行解析并生成SQL执行计划;
执行所述SQL执行计划;
获取所述主节点执行所述SQL执行计划产生的第一增量日志,对所述第一增量日志的数据进行哈希计算,得到第一哈希值;
接收每个所述从节点发送的第二哈希值,其中,所述第二哈希值是对所述从节点执行根据所述SQL语句生成的SQL执行计划产生的第二增量日志的数据进行哈希计算得到;
根据所述第一哈希值和所述第二哈希值确定同步结果;
根据所述同步结果发送操作结果信息给所述客户端。
另一方面,本发明实施例提供了一种数据同步处理方法,应用于从节点,所述方法包括:
接收主节点发送的SQL执行计划;
执行所述SQL执行计划;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中兴通讯股份有限公司,未经中兴通讯股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010609672.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





