[发明专利]一种增量同步方法、装置及系统在审
申请号: | 201810259007.3 | 申请日: | 2018-03-27 |
公开(公告)号: | CN108595522A | 公开(公告)日: | 2018-09-28 |
发明(设计)人: | 丁波;王志华;喻波;王志海;韩振国;安鹏 | 申请(专利权)人: | 北京明朝万达科技股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 100097 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本文件 目标服务器 装置及系统 操作记录 目标数据库 数据库技术 异构数据库 操作事件 数据同步 同步系统 源服务器 源数据库 增量数据 表生成 触发器 兼容性 同步的 触发 加载 记录 网络 | ||
本发明实施例提供了一种增量同步方法、装置及系统涉及数据库技术领域。该增量同步方法应用于增量同步系统的源服务器中,包括:通过触发器对源数据库中的操作事件进行记录,生成操作记录表;根据所述操作记录表生成待同步的文本文件;通过网络,将所述文本文件发送给目标服务器,以触发所述目标服务器将所述文本文件中的增量数据加载至目标数据库中。本发明实施例可轻易实现异构数据库之间的数据同步,兼容性高。
技术领域
本发明涉及数据库技术领域,特别是涉及一种增量同步方法,一种增量同步装置以及一种增量同步系统。
背景技术
随着信息技术的快速发展,数据库(Database)已成为诸如管理信息系统、办公自动化系统、决策支持系统等各类信息系统的核心部分,在信息安全、管理等各方面得到广泛的应用。
目前,数据库通常会把插入、更新、删除等这些操作以二进制的格式记录到数据库日志中。在同步程序启动后,就可以从数据库日志中获取该数据库的所有操作,并可以使用这些操作对应的数据来更新同步数据仓库。但是,这种数据同步方式需要将二进制格式的日志转换为文本格式,且需要按照顺序将日志里面记录的操作读取出来,数据同步方式复杂。
此外,不同的数据库记录的操作日志的方式会有很大差别。例如,当A类型数据库和B类型数据库在结构化查询语言(Structured Query Language,SQL)语法、事物处理方式等等都不一样,A类型数据库的日志一般无法被B类型数据库使用。因此,目前采用日志的数据同步方式只能处理同一类型的数据库,兼容性低。
发明内容
鉴于上述问题,提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的一种增量同步方法。
相应的,本发明实施例还提供一种增量同步装置和一种增量同步系统,用以保证上述方法的实现及应用。
为了解决上述问题,本发明实施例公开了一种增量同步方法,应用于增量同步系统的源服务器中,包括:通过触发器对源数据库中的操作事件进行记录,生成操作记录表;根据所述操作记录表生成待同步的文本文件;通过网络,将所述文本文件发送给目标服务器,以触发所述目标服务器将所述文本文件中的增量数据加载至目标数据库中。
可选地,所述通过触发器对源数据库中的操作事件进行记录之前,还包括:依据输入的链接信息,确定待同步的源数据表;针对所述源数据表创建对应的触发器。
可选地,所述依据所述操作记录表生成待同步的文本文件,包括:对所述操作记录表进行扫描处理,确定待同步的增量数据;基于所述待同步的增量数据,生成所述文本文件。
可选地,所述对所述操作记录表进行扫描处理,确定待同步的增量数据,包括:
对所述操作记录表进行扫描,确定所述操作记录表中记录的操作信息,其中,所述操作信息包括以下至少一项:源数据表的主键信息、操作标识以及时间戳;
依据所述操作信息,从所述源数据表中抽取待同步的增量数据。
可选地,所述从所述源数据表中抽取待同步的增量数据之后,还包括:对所述操作记录表进行清空。
本发明实施例还公开了一种增量同步装置,应用于增量同步系统的源服务器中,所述装置包括:操作记录模块,用于通过触发器对源数据库中的操作事件进行记录,生成操作记录表;文本文件生成模块,用于根据所述操作记录表生成待同步的文本文件;文本文件发送模块,用于通过网络,将所述文本文件发送给目标服务器,以触发所述目标服务器将所述文本文件中的增量数据加载至目标数据库中。
可选地,还包括:源数据表确定模块,用于依据输入的链接信息,确定待同步的源数据表;触发器创建模块,用于针对所述源数据表创建对应的触发器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明朝万达科技股份有限公司,未经北京明朝万达科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810259007.3/2.html,转载请声明来源钻瓜专利网。