[发明专利]一种MySQL数据库的数据同步方法、装置及电子设备有效
申请号: | 201710304345.X | 申请日: | 2017-05-03 |
公开(公告)号: | CN108804463B | 公开(公告)日: | 2021-07-09 |
发明(设计)人: | 朱建成;胡文飞 | 申请(专利权)人: | 杭州海康威视数字技术股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/28;G06F11/20 |
代理公司: | 北京市广友专利事务所有限责任公司 11237 | 代理人: | 祁献民 |
地址: | 310051 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 mysql 数据库 数据 同步 方法 装置 电子设备 | ||
本发明的实施例公开一种MySQL数据库的数据同步方法、装置及电子设备,涉及数据同步技术,能够有效提升数据同步效率。所述数据同步方法包括:监测到主机数据库与备机数据库之间的数据同步发生异常时,对主机数据库的数据操作的次数进行累计计数;监测到所述数据同步恢复正常时,如果所述累计计数的计数值超过预先设置的计数值阈值,将所述主机数据库的数据在主机本地进行导出操作;将所述导出操作所导出的数据进行导入操作,并生成所述导入操作的二进制日志,以使所述备机数据库根据所述二进制日志,将所述主机数据库的数据同步至备机数据库。本发明适用于基于MySQL数据库的数据同步。
技术领域
本发明涉及数据同步技术,尤其涉及一种MySQL数据库的数据同步方法、装置及电子设备。
背景技术
关系型数据查询语言(MySQL)由于具有体积小、成本低、查询速度快、稳定性高等特点,被广泛应用于各种中小型英特(Internet)网站、数据库存储及数据库服务。
以数据库存储服务为例,通过MySQL搭建主主同步的高可用性(HA)方案,采用两个数据库互为主从的冗余备份模式,以及,利用数据库的复制(replication)机制,从而实现在线同步备份数据的功能,使得主从数据库中的数据保持同步。也就是说,在数据库运行过程中,如果对主机数据库执行写入、更新或删除数据的操作,主机数据库中的MySQL在本地的一数据库表中记录数据操作的二进制日志(binary log),并通过配置的复制机制,将数据操作的二进制日志同步备份到备机数据库(又可称为从机数据库)中,备机数据库依据二进制日志进行相应的数据操作,从而实现对数据库的在线冗余备份功能,保障当一数据库(主机数据库或备机数据库)发生异常时,另一数据库(备机数据库或主机数据库)能够即时接管发生异常的数据库的服务,并保障两者数据的一致性。
但该数据同步方法中,当备机由于网络异常或断电等情况,造成备机较长时间下线,而在该过程中,如果主机对数据进行频繁的增、删、改、查等数据操作,则会累积大量包括增、删、改、查等数据操作的二进制日志,在备机恢复正常工作后,恢复后的备机需要逐条同步主机累积的所有数据操作的二进制日志。备机同步主机累积的二进制日志后,是单条执行操作的,每条目志提交一次事务,在数据量较大时会有大量的输入输出(I/O)操作,使得同步操作耗时较长。
发明内容
有鉴于此,本发明实施例提供一种MySQL数据库的数据同步方法、装置及电子设备,能够有效提升数据同步效率。
第一方面,本发明实施例提供一种MySQL数据库的数据同步方法,包括:
监测主机数据库与备机数据库之间的数据同步是否正常;
监测到所述数据同步发生异常时,对主机数据库的数据操作的次数进行累计计数;
监测到所述数据同步恢复正常时,判断所述累计计数的计数值是否超过预先设置的计数值阈值;
如果所述累计计数的计数值超过预先设置的计数值阈值,则将所述主机数据库的数据在主机本地进行导出操作;
将所述导出操作所导出的数据进行导入操作以导入所述主机数据库,并生成所述导入操作的二进制日志,以使所述备机数据库根据所述二进制日志,将所述主机数据库的数据同步至备机数据库。
结合第一方面,在第一方面的第一种实施方式中,所述监测到所述数据同步发生异常时,对主机数据库的数据操作的次数进行累计计数,包括:监测到所述数据同步发生异常时,将主机数据库中事件表的同步标识设为异常;对主机数据库的数据操作的次数进行累计计数。
结合第一方面或第一方面的第一种实施方式,在第一方面的第二种实施方式中,所述监测到所述数据同步恢复正常时,判断所述累计计数的计数值是否超过预先设置的计数值阈值,包括:监测到所述数据同步恢复正常时,调用数据记录查询接口查询并判断所述累计计数的计数值是否超过预先设置的计数值阈值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视数字技术股份有限公司,未经杭州海康威视数字技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710304345.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置