[发明专利]异构数据比对方法及装置

说明书

本发明提供一种异构数据比对方法及装置，属于金融技术领域或其他技术领域。该异构数据比对方法包括：根据数据比对指令获取两个数据表，根据数据表中各列记录的数据类型将两个数据表的各列记录分别进行求和比对；根据求和比对的比对结果、数据表的唯一标识和数据量确定数据比对策略；按照数据比对策略将数据表的各记录分别拼接为对应的目标字符串，比对两个数据表的目标字符串以生成数据表比对结果。本发明可以对异构数据源迁移或同步后的数据表进行快速验证，解决性能瓶颈，提高比对效率。

技术领域

本发明涉及金融技术领域，具体地，涉及一种异构数据比对方法及装置。

背景技术

异构数据源同表下的数据比对是一个常遇到的问题，表定义的差异和表数据的内容是否一致都是需要完整验证的。如果人工逐条比对很容易出现遗漏，很难排除一些细节差异。

当前有一部分软件可以支持异构数据库的表比对，比如tablediff和sqldelta等数据库管理相关工具，但是当前软件在比对大数据表极有可能出现内存溢出软件崩溃等情况。

发明内容

本发明实施例的主要目的在于提供一种异构数据比对方法及装置，以对异构数据源迁移或同步后的数据表进行快速验证，解决性能瓶颈，提高比对效率。

为了实现上述目的，本发明实施例提供一种异构数据比对方法，包括：

根据数据比对指令获取两个数据表，根据数据表中各列记录的数据类型将两个数据表的各列记录分别进行求和比对；

根据求和比对的比对结果、数据表的唯一标识和数据量确定数据比对策略；

按照数据比对策略将数据表的各记录分别拼接为对应的目标字符串，比对两个数据表的目标字符串以生成数据表比对结果。

本发明实施例还提供一种异构数据比对装置，包括：

求和比对模块，用于根据数据比对指令获取两个数据表，根据数据表中各列记录的数据类型将两个数据表的各列记录分别进行求和比对；

比对策略确定模块，用于根据求和比对的比对结果、数据表的唯一标识和数据量确定数据比对策略；

比对结果生成模块，用于按照数据比对策略将数据表的各记录分别拼接为对应的目标字符串，比对两个数据表的目标字符串以生成数据表比对结果。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并在处理器上运行的计算机程序，处理器执行计算机程序时实现所述的异构数据比对方法的步骤。

本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现所述的异构数据比对方法的步骤。

本发明实施例的异构数据比对方法及装置先根据数据类型将两个数据表的各列记录分别进行求和比对，再根据求和比对的比对结果确定数据比对策略以将数据表的各记录分别拼接为对应的目标字符串，比对两个数据表的目标字符串以生成数据表比对结果，可以对异构数据源迁移或同步后的数据表进行快速验证，解决性能瓶颈，提高比对效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一实施例中异构数据比对方法的流程图；

图2是本发明另一实施例中异构数据比对方法的流程图；

图3是本发明又一实施例中异构数据比对方法的流程图；

图4是本发明一实施例中拼接目标字符串的流程图；