[发明专利]数据备份方法、装置、介质和计算设备有效
申请号: | 202011199633.1 | 申请日: | 2020-10-30 |
公开(公告)号: | CN112256485B | 公开(公告)日: | 2023-08-04 |
发明(设计)人: | 余利华;温正湖;蒋鸿翔;王刚 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F16/27;G06F16/28;G06F16/18;G06F16/182 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 吕朝蕙 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 备份 方法 装置 介质 计算 设备 | ||
本发明提供了一种数据备份方法。该方法应用于分布式系统包括的多个数据库中的任一数据库,该方法先响应于任一数据库的重启,确定日志文件供给设备。随后根据上述任一数据库执行的最新刷盘操作所针对的第一归档日志文件,向日志文件供给设备发送获取请求,以获取记录有针对待备份数据的事务信息的第二归档日志文件。最后针对第二归档日志文件执行刷盘操作,以将待备份数据存入上述任一数据库的磁盘中。其中,上述任一数据库中的归档日志和提交的数据采用除实时更新规则外的其他更新规则存入磁盘中。通过该方法,可以在保证关系型数据库的高处理性能的同时,保证数据事务数据的完整性。本发明还提供了一种数据备份装置、介质和计算设备。
技术领域
本发明的实施方式涉及数据库技术领域,更具体地,本发明的实施方式涉及数据备份方法、装置、介质和计算设备。
背景技术
本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
关系型数据库(例如MySQL)作为联机事务处理(On-Line TransactionProcessing,OLTP)数据库,为了避免事务提交后数据因服务器宕机而丢失,一般采用“双一”设置。该“双一”设置为:在每次进行事务组提交(group commit)时,都对归档日志(例如Binlog)文件执行刷盘操作,以将事务的归档日志实时地存储至磁盘;同时,每个事务在引擎中提交后,都将事务对应的重做日志文件实时地存储至磁盘。
在采用“双一”设置时,由于需要实时刷盘,会导致关系型数据库处理性能降低,影响正常事务的执行效率。
发明内容
因此在现有技术中,无法兼顾数据完整性和数据库处理效率,这是非常令人烦恼的过程。
为此,非常需要一种改进的数据备份方法,以在为了保证数据库处理性能而不对归档日志和重做日志进行实时存储的同时,保证数据的完整性,避免数据的丢失。
在本上下文中,本发明的实施方式期望提供一种能够在分布式系统中的数据库重启时,准确获取到未存储至该重启数据库本地的待备份数据的方法,以保证数据的完整性。
在本发明实施方式的第一方面中,提供了一种数据备份方法,该方法应用于分布式系统包括的多个数据库中的任一数据库。该方法包括:响应于任一数据库的重启,确定日志文件供给设备;根据上述任一数据库执行的最新刷盘操作所针对的第一归档日志文件,向日志文件供给设备发送获取请求,以获取记录有针对待备份数据的事务信息的第二归档日志文件;以及针对第二归档日志文件执行刷盘操作,以将待备份数据存入上述任一数据库的磁盘中,其中,上述任一数据库中的归档日志和提交的数据采用除实时更新规则外的其他更新规则存入磁盘中。
在本发明的一个实施例中,上述向日志文件供给设备发送获取请求包括:根据上述任一数据库预先存储的偏移位置,向日志文件供给设备发送获取请求,其中,偏移位置指示最新刷盘操作所针对的事务信息在第一归档日志文件中的位置。
在本发明的另一实施例中,上述根据任一数据库预先存储的偏移位置,向日志文件供给设备发送获取请求包括:根据偏移位置截取第一归档日志文件,得到日志段,该日志段中的事务信息为已执行的刷盘操作所针对的事务信息;根据日志段对预设参数进行初始化,该预设参数用于记录已执行的刷盘操作所针对的事务信息的全局标识;以及根据初始化后的预设参数,向日志文件供给设备发送获取请求。
在本发明的又一个实施例中,上述针对第二归档日志文件执行刷盘操作包括:基于幂等模式,针对第二归档日志文件执行刷盘操作。
在本发明的再一个实施例中,上述任一数据库的磁盘中存储的数据以表的格式存储,上述数据备份方法还包括在上述任一数据库对数据进行备份的过程中:响应于执行完对磁盘中存储的表的结构的更新操作,生成新的归档日志文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011199633.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种三轮车的模块化前轮
- 下一篇:一种安全性高的丝杠升降机
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置