[发明专利]一种跨数据库平台同步数据的核对方法、设备以及系统

说明书

本发明提供一种跨数据库平台同步数据的核对方法、系统、计算机设备以及计算机可读存储介质，涉及数据处理技术领域。所述方法包括：对源数据库的每日数据进行拆分合并，得到日数据文件；对目标数据库的每日数据进行数据快照，生成数据快照文件，所述目标数据库的每日数据为从源数据库实时向目标数据库下刷的；按照日期存储所述日数据文件以及所述数据快照文件；比对核对日期对应的日数据文件以及数据快照文件，输出比对结果信息。本发明能够对数据不一致出现的情况进行有效地检查，保障了数据一致性和可用性，从而保证交易的正常运行。

技术领域

本发明关于数据处理技术领域，特别是关于数据的迁移核对技术，具体的讲是一种跨数据库平台同步数据的核对方法、跨数据库平台同步数据的核对系统、计算机设备以及计算机可读存储介质。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

随着我国金融行业的飞速发展，银行、保险、证券业业务量逐年增加，日交易量飞速增长。近些年，电子商务逐渐改变着人们的生活方式，每年“618”、“双11”活动一次又一次刷新了交易记录。在这种情况下，传统金融行业科技部门的核心交易系统会面对越来越大的日间交易压力。IBM的大型机系统因其特有的工作机制及强大的技术支持，成为各金融业核心交易系统的主要组成部分。为了降低大型机交易压力，各金融科技部门纷纷开发实施主机下移项目，将跑在主机上的交易下移至小机，让核心交易能够运行在双系统上，实现“两条腿走路”，以降低主机端的MIPS消耗。

在双系统运行的同时，需保证源系统和目标系统两端数据库中的数据保持一致，从而采用数据同步装置。目前商业银行已实现进行数据下移的第一步，却并没有建立起一套高效的非侵入式的数据核对进行保证两端数据的一致性。

目前，存在的一种解决数据核对问题时的方法，该方法是将增量数据导入核对表再通过SQL的join语句进行两表间差异化对比。首先相对文件操作而言，SQL语句执行效率较为低下，尤其是对整库的数据进行sql语句操作时，执行时间将更为冗长。

此外，现有技术是直接在生产环境将每日批量数据与生产数据库数据进行对比，而生产数据库中的数据是实时变动的，因此比对的准确性会随着比对日期距离生产环境当日日期的增加而降低。并且，比对方式是在数据库层面进行的，如果在日间进行数据核对，对生产数据库的select操作会占用数据库资源，会影响到对数据库的日常操作，降低生产环境效率，对生产环境有强侵入性。

因此，如何提供一种新的方案，其能够解决上述技术缺陷是本领域亟待解决的技术难题。

发明内容

有鉴于此，本发明提供了一种跨数据库平台同步数据的核对方法、跨数据库平台同步数据的核对系统、计算机设备以及计算机可读存储介质，通过在进行数据核对时，以源数据库作为比对基准，对目标数据库进行比对，数据同步装置实时监控源数据库的变更情况，在数据进行变动时，触发改动目标数据库，对数据不一致出现的情况进行有效地检查，保障了数据一致性和可用性，从而保证交易的正常运行。

为了实现上述目的，本发明提供了一种跨数据库平台同步数据的核对方法，所述方法包括：

对源数据库的每日数据进行拆分合并，得到日数据文件；

对目标数据库的每日数据进行数据快照，生成数据快照文件，所述目标数据库的每日数据为从源数据库实时向目标数据库下刷的；

按照日期存储所述日数据文件以及所述数据快照文件；

比对核对日期对应的日数据文件以及数据快照文件，输出比对结果信息；

通过在进行数据核对时，以源数据库作为比对基准，对目标数据库进行比对，数据同步装置实时监控源数据库的变更情况，在数据进行变动时，触发改动目标数据库，对数据不一致出现的情况进行有效地检查，保障了数据一致性和可用性，从而保证交易的正常运行。