[发明专利]一种支持异构时序数据库的数据在线迁移方法有效
申请号: | 201611169720.6 | 申请日: | 2016-12-16 |
公开(公告)号: | CN106777126B | 公开(公告)日: | 2020-05-19 |
发明(设计)人: | 林玥廷;徐展强;向德军;卢建刚;邹光球;李志金;谢小鹏;向春波;胡加庆;邓黎明;封伟雄;谢鹏 | 申请(专利权)人: | 广东电网有限责任公司电力调度控制中心;湖南大唐先一科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/27 |
代理公司: | 长沙七源专利代理事务所(普通合伙) 43214 | 代理人: | 郑隽;周晓艳 |
地址: | 510620 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 支持 时序 数据库 数据 在线 迁移 方法 | ||
本发明提供了一种支持异构时序数据库的数据在线迁移方法,克服了通过数据恢复还原实现数据迁移的方法不能跨时序数据库类型、不能跨网络、应用离线时间长的缺点。该方法包括:部署目标X‑DB数据库,确定时间截止点,部署多路数据代理,接入X‑DB目标数据库并设置为低优先级且暂时停用,将时序数据同时存入源数据库及X‑DB操作日志,启用源数据历史数据泵抽取自要求的起始时间至时间截止点的数据包,压缩并传输历史数据包及操作日志,X‑DB数据拾取器进行历史数据恢复,进行日志补登,所有堆积日志均已传输并恢复完成,创建日志停止标识,中断源数据库,启用X‑DB结点,多路数据代理停止日志创建,按照配置规则X‑DB数据库将被选中,实现自动目标数据库切换。
技术领域
本发明涉及计算机领域,特别地,涉及一种支持异构时序数据库的数据在线迁移方法。
背景技术
电力行业信息化是一个持续发展完善的过程,新技术在电力行业不断得到应用,尤其数据库技术近年得到了较大的发展,技术发展的同时导致了原有系统或者技术的淘汰,为了最大限度地保护现有资产,通常需要对被淘汰系统的历史数据进行迁移,以及需要在不同类型的数据库之间进行数据迁移。
发展过程中建立的各个业务系统通常存在自身的时序数据库,这些数据库通常平台不同、类型各异,形成了数据孤岛,为保证数据库系统有序、可管理和一致性,为降低数据的使用成本,通常需要为每个应用开发相应的数据接口,或通过数据迁移将不同种数据集中到一个数据中心。
现有通常的数据迁移方法主要有:直接拷贝、数据库工具导出导入迁移、存储虚拟化等。这些方法主要针对的是同种时序库,不同实例的数据转移,不能满足不同数据库(类型不同,结构不一)间的数据迁移;也有的提出了异种数据库的关系数据迁移和实现,但对具有时间序列特性的时序数据库之间的迁移不能支持;时序数据库存在数据变化频繁,数据量大,存储IO较高的特点,通常的数据迁移方式存在停机时间长的缺点,对于电力生产环境下进行数据迁移的特殊情况,对于如何在不影响或者尽可能小地影响现有数据库系统正常运行的前提下,完成数据库之间的数据迁移缺乏必要的考虑。
发明内容
本发明目的在于提供一种支持异构时序数据库的数据在线迁移方法,以解决现数据库的数据在线迁移方法没能实现不同数据库间的数据迁移的技术问题。
为实现上述目的,本发明提供了一种支持异构时序数据库的数据在线迁移方法,包括如下步骤:
步骤1:数据迁移前先进行目标数据库和源数据库的准备,并确定切换的时间和频率;
步骤2:完成目标数据库和源数据库的准备后,部署多路数据代理;
步骤3:将多路数据代理接入目标数据库,设计目标数据库优先级并设置暂时禁用业务应用;
步骤4:启动源数据库的数据泵;
步骤5:将业务应用的数据操作指向多路数据代理,重新启动业务应用;
步骤6:历史数据和日志数据在源数据库进行压缩,并传到目标数据库;
步骤7:目标数据拾取器接收从源数据库传入的历史数据并进行目标数据库的数据恢复;
步骤8:根据原设定的切换的时间判断是否到达时间截止点;
步骤9:当时间戳未到达截止点时间时,返回步骤7;到达截止点时间时,进入下一步骤;
步骤10:启动中断程序,中断历史数据接收程序,进入下一步骤;
步骤11:启用日志补登程序,对日志数据进行补登;
步骤12:判断已经传输完成的日志数据是否补登完成;
步骤13:当日志数据已经补登完成时,进入下一步骤;当日志数据没有补登完成时,返回步骤11;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东电网有限责任公司电力调度控制中心;湖南大唐先一科技有限公司,未经广东电网有限责任公司电力调度控制中心;湖南大唐先一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611169720.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置