[发明专利]数据库同步方法、系统、生产端及消费端解析服务器在审
| 申请号: | 202211474819.2 | 申请日: | 2022-11-23 |
| 公开(公告)号: | CN115730010A | 公开(公告)日: | 2023-03-03 |
| 发明(设计)人: | 刘志华 | 申请(专利权)人: | 中国银行股份有限公司 |
| 主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/17;G06F16/178 |
| 代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 薛平 |
| 地址: | 100818 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据库 同步 方法 系统 生产 消费 解析 服务器 | ||
1.一种数据库同步方法,其特征在于,包括:
生产端解析服务器在检测到生产端数据库产生待同步数据时,将所述待同步数据进行二进制日志转储,得到待同步数据的二进制日志文件;解析所述待同步数据的二进制日志文件,获得完整的解析数据,将所述解析数据传递给持久层存储;
消费端解析服务器分批次读取所述持久层存储的解析数据,将每一批次读取的解析数据赋予唯一顺序标识;根据所述唯一顺序标识将每一批次读取的解析数据同步至消费端数据库。
2.根据权利要求1所述的方法,其特征在于,在检测到生产端数据库产生待同步数据时,将所述待同步数据进行二进制日志转储,得到待同步数据的二进制日志文件,包括:
在检测到生产端数据库产生待同步数据时,对所述待同步数据执行关系型数据库管理系统MySQL数据库中的二进制日志转储Binlog Dump操作,将待同步数据转化为二进制日志文件。
3.根据权利要求1所述的方法,其特征在于,解析所述待同步数据的二进制日志文件,获得完整的解析数据,将所述解析数据传递给持久层存储,包括:
执行MySQL数据库中的二进制日志解析Binlog Parser操作对所述待同步数据的二进制日志文件进行解析,得到完整的解析数据;
将完整的解析数据传递给Couchbase数据库进行持久化存储。
4.根据权利要求1所述的方法,其特征在于,还包括:记录所述待同步数据的二进制日志文件的解析进度。
5.根据权利要求1所述的方法,其特征在于,根据所述唯一顺序标识将每一批次读取的解析数据同步至消费端数据库,还包括:
当同步至消费端数据库的执行语句出现异常情况时,自动跳过异常执行语句,继续下一执行语句的操作。
6.根据权利要求1所述的方法,其特征在于,所述生产端解析服务器与所述消费端解析服务器分开部署。
7.根据权利要求1所述的方法,其特征在于,所述持久层还包括扩展接口,所述扩展接口包括用户访问业务接口、允许用户操作接口以及数据同步流量控制接口。
8.一种数据库同步方法,其特征在于,该方法应用于生产端解析服务器,该方法包括:
在检测到生产端数据库产生待同步数据时,将所述待同步数据进行二进制日志转储,得到待同步数据的二进制日志文件;
解析所述待同步数据的二进制日志文件,获得完整的解析数据,将所述解析数据传递给持久层存储。
9.一种数据库同步方法,其特征在于,该方法应用于消费端解析服务器,该方法包括:
分批次读取所述持久层存储的解析数据;
将每一批次读取的解析数据赋予唯一顺序标识;
根据所述唯一顺序标识将每一批次读取的解析数据同步至消费端数据库。
10.一种数据库同步系统,其特征在于,包括:
生产端解析服务器,用于在检测到生产端数据库产生待同步数据时,将所述待同步数据进行二进制日志转储,得到待同步数据的二进制日志文件;解析所述待同步数据的二进制日志文件,获得完整的解析数据,将所述解析数据传递给持久层存储;
消费端解析服务器,用于分批次读取所述持久层存储的解析数据,将每一批次读取的解析数据赋予唯一顺序标识;根据所述唯一顺序标识将每一批次读取的解析数据同步至消费端数据库。
11.根据权利要求10所述的系统,其特征在于,所述生产端解析服务器具体用于:
在检测到生产端数据库产生待同步数据时,对所述待同步数据执行关系型数据库管理系统MySQL数据库中的二进制日志转储Binlog Dump操作,将待同步数据转化为二进制日志文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211474819.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:文本关键要素抽取方法、系统、存储介质和电子设备
- 下一篇:罐体组件以及抽吸车





