[发明专利]一种实现数据比对的方法、装置和存储介质

说明书

本申请公开了一种实现数据比对的方法、装置和存储介质，具体包括：将两组源数据中的每一组写入数据库的第一数据结构作为源数据表单；针对每组源数据表单，确定并利用第一关键字段构造第一数据，作为一次比对数据；针对每个一次比对数据，提取相应组源数据的一次比对集合；针对两组源数据，对比两个一次比对集合，得到平账集合和存疑集合；针对每组源数据表单，确定二次比对集合；从平账集合和存疑集合中提取第二关键字段的字段值，构成存疑集合和存疑集合的二次比对关键字段值；将二次比对关键字段值与二次比对集合进行比较，根据比较结果构造正常数据表单和异常数据表单。通过本申请，能够实现比对规则的动态配置，方便地实现数据比对。

技术领域

本申请涉及数据统计领域，尤其涉及一种实现数据比对的方法、装置、计算机可读存储介质以及一种电子设备。

背景技术

在很多场景下需要进行不同数据表间的比对，例如财务对账等，在单个数据表中每条数据可能包括不同的字段，进行数据比对时，需要针对参与比对的每个字段一一进行比对。目前，在进行数据比对时，大多采用通过Oracle数据库的INTERSECT和MINUS特性来对不同数据表执行交集、差集得到比对结果，受限于单体数据库的资源瓶颈，对不同数据表的字段函数处理时可能造成索引失效，影响性能又不利于业务规则的扩展。

在房产交易系统中也会进行不同子系统间的数据比对，例如交易子系统和通道子系统进行数据比对。目前是通过消息队列将交易子系统和通道子系统的数据发送到对账平台，对账平台根据产品需求逐一实现数据比对逻辑。但是由于需求发生变化等原因，通道数据结构可能会进行调整，需要比对的字段也可能发生变化，因此会导致针对此前数据结构设置的对账规则失效，需要紧急进行对账代码的修复。

发明内容

针对上述现有技术，本申请实施例公开一种实现数据比对的方法，可以动态配置比对规则，方便地实现数据比对。

一种实现数据比对的方法，包括：

将待比对的两组源数据中的每一组写入数据库的第一数据结构，作为源数据表单；其中，所述每组源数据中包括若干条数据，每条数据包括若干字段对应的字段值；

针对每组源数据表单，确定并利用第一关键字段构造第一数据，作为相应组源数据的一次比对数据；针对每个一次比对数据，提取所有所述第一关键字段值组成集合，作为相应组源数据的一次比对集合；

针对两组源数据，对比两个所述一次比对集合，得到平账集合和存疑集合；

针对每组源数据表单，确定并利用第二关键字段构造第二数据，作为相应组源数据的二次比对集合；

从所述存疑集合中分别提取所述第二关键字段的字段值，构成所述存疑集合的二次比对关键字段值；

将所述二次比对关键字段值与所述二次比对集合进行比较，根据比较结果构造正常数据表单和异常数据表单。

可选地，所述第一关键字段为预先设定的所有参与一次比对的字段，将每组源数据表单中的单条数据中所有第一关键字段的字段值拼接在一起作为所述一次比对数据的所述第一关键字段值；

和/或，

所述第二关键字段为预先设定的所有参与二次比对的字段，将所述每组源数据表单中的单条数据中所有第二关键字段拼接在一起作为所述二次比对集合的第二关键字段值。

可选地，所述平账集合中包括两组源数据的一次比对集合中完全相同的第一关键字段值；所述存疑集合包括多账集合和少账集合，所述多账集合中包括第一组源数据的一次比对集合中包括、且第二组源数据的一次比对集合中未包括的第一关键字段值，所述少账集合中包括第一组源数据的一次比对集合中未包括、且第二组源数据的一次比对集合中包括的第一关键字段值。

可选地，所述将所述二次比对关键字段值与所述二次比对集合进行比较，根据比较结果构造正常数据表单和异常数据表单，包括：