[发明专利]数据备份方法、装置、介质和计算设备有效

专利信息
申请号: 202011199633.1 申请日: 2020-10-30
公开(公告)号: CN112256485B 公开(公告)日: 2023-08-04
发明(设计)人: 余利华;温正湖;蒋鸿翔;王刚 申请(专利权)人: 网易(杭州)网络有限公司
主分类号: G06F11/14 分类号: G06F11/14;G06F16/27;G06F16/28;G06F16/18;G06F16/182
代理公司: 中科专利商标代理有限责任公司 11021 代理人: 吕朝蕙
地址: 310052 浙江省杭州*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 备份 方法 装置 介质 计算 设备
【说明书】:

发明提供了一种数据备份方法。该方法应用于分布式系统包括的多个数据库中的任一数据库,该方法先响应于任一数据库的重启,确定日志文件供给设备。随后根据上述任一数据库执行的最新刷盘操作所针对的第一归档日志文件,向日志文件供给设备发送获取请求,以获取记录有针对待备份数据的事务信息的第二归档日志文件。最后针对第二归档日志文件执行刷盘操作,以将待备份数据存入上述任一数据库的磁盘中。其中,上述任一数据库中的归档日志和提交的数据采用除实时更新规则外的其他更新规则存入磁盘中。通过该方法,可以在保证关系型数据库的高处理性能的同时,保证数据事务数据的完整性。本发明还提供了一种数据备份装置、介质和计算设备。

技术领域

本发明的实施方式涉及数据库技术领域,更具体地,本发明的实施方式涉及数据备份方法、装置、介质和计算设备。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

关系型数据库(例如MySQL)作为联机事务处理(On-Line TransactionProcessing,OLTP)数据库,为了避免事务提交后数据因服务器宕机而丢失,一般采用“双一”设置。该“双一”设置为:在每次进行事务组提交(group commit)时,都对归档日志(例如Binlog)文件执行刷盘操作,以将事务的归档日志实时地存储至磁盘;同时,每个事务在引擎中提交后,都将事务对应的重做日志文件实时地存储至磁盘。

在采用“双一”设置时,由于需要实时刷盘,会导致关系型数据库处理性能降低,影响正常事务的执行效率。

发明内容

因此在现有技术中,无法兼顾数据完整性和数据库处理效率,这是非常令人烦恼的过程。

为此,非常需要一种改进的数据备份方法,以在为了保证数据库处理性能而不对归档日志和重做日志进行实时存储的同时,保证数据的完整性,避免数据的丢失。

在本上下文中,本发明的实施方式期望提供一种能够在分布式系统中的数据库重启时,准确获取到未存储至该重启数据库本地的待备份数据的方法,以保证数据的完整性。

在本发明实施方式的第一方面中,提供了一种数据备份方法,该方法应用于分布式系统包括的多个数据库中的任一数据库。该方法包括:响应于任一数据库的重启,确定日志文件供给设备;根据上述任一数据库执行的最新刷盘操作所针对的第一归档日志文件,向日志文件供给设备发送获取请求,以获取记录有针对待备份数据的事务信息的第二归档日志文件;以及针对第二归档日志文件执行刷盘操作,以将待备份数据存入上述任一数据库的磁盘中,其中,上述任一数据库中的归档日志和提交的数据采用除实时更新规则外的其他更新规则存入磁盘中。

在本发明的一个实施例中,上述向日志文件供给设备发送获取请求包括:根据上述任一数据库预先存储的偏移位置,向日志文件供给设备发送获取请求,其中,偏移位置指示最新刷盘操作所针对的事务信息在第一归档日志文件中的位置。

在本发明的另一实施例中,上述根据任一数据库预先存储的偏移位置,向日志文件供给设备发送获取请求包括:根据偏移位置截取第一归档日志文件,得到日志段,该日志段中的事务信息为已执行的刷盘操作所针对的事务信息;根据日志段对预设参数进行初始化,该预设参数用于记录已执行的刷盘操作所针对的事务信息的全局标识;以及根据初始化后的预设参数,向日志文件供给设备发送获取请求。

在本发明的又一个实施例中,上述针对第二归档日志文件执行刷盘操作包括:基于幂等模式,针对第二归档日志文件执行刷盘操作。

在本发明的再一个实施例中,上述任一数据库的磁盘中存储的数据以表的格式存储,上述数据备份方法还包括在上述任一数据库对数据进行备份的过程中:响应于执行完对磁盘中存储的表的结构的更新操作,生成新的归档日志文件。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011199633.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top