[发明专利]一种数据核对的方法及装置

权利要求书

1.一种数据核对的方法，其特征在于，包括：

从不同数据源获取N个待核对数据集；N为正整数；所述N个待核对数据集之间具有唯一关联主键；

针对任一待核对数据集，对所述待核对数据集进行分片，得到多个数据集分片，并将所述多个数据集分片进行分布式存储；

针对所述N个待核对数据集中的任一关联主键值，并发遍历分布式存储的各数据集分片，得到核对记录；所述核对记录包括关联主键值以及所述关联主键值在所述N个待核对数据集中的各数据明细；所述核对记录中数据明细的数量不大于N；

根据所述各核对记录确定核对结果。

2.如权利要求1所述的方法，其特征在于，对所述待核对数据集进行分片，包括：

确定分布式存储的M个数据库；

按照所述M个数据库均匀存储数据集分片的原则，对所述待核对数据集进行分片。

3.如权利要求1所述的方法，其特征在于，针对所述N个待核对数据集中的任一关联主键值，并发遍历分布式存储的各数据集分片，包括：

获取所述N个待核对数据集中的各关联关键值；

对所述关联主键值进行去重处理；

针对去重后的所述N个待核对数据集中的任一关联主键值，并发遍历分布式存储的各数据集分片。

4.如权利要求1所述的方法，其特征在于，根据所述各核对记录确定核对结果，包括：

将各核对记录分组至各计算主机，并接收所述各计算主机发送的各核对记录的记录结果；所述记录结果包括平账记录和非平账记录；

所述平账记录是计算主机在判断核对记录中数据明细的数量为N时确定的；所述非平账记录是计算主机在判断核对记录中数据明细的数量不为N时确定的；

将各记录结果进行汇总，确定所述核对结果。

5.如权利要求4所述的方法，其特征在于，将各核对记录分组至各计算主机，包括：

针对任一核对记录，根据所述核对记录的关联主键值确定分组值；

将具有相同分组值的各核对记录确定为同一分组；

为每个分组确定对应的计算主机，并将每个分组对应的各核对记录发送至对应的计算主机。

6.如权利要求4所述的方法，其特征在于，所述平账记录是计算主机在判断核对记录中数据明细的数量为N，且各数据明细的信息一致时确定的；所述非平账记录是计算主机在判断核对记录中数据明细的数量不为N，或各数据明细的信息不一致时确定的。

7.如权利要求5所述的方法，其特征在于，所述方法还包括：

各计算主机将各自的各核对记录的记录结果存储于同一目录下。

8.一种数据核对的装置，其特征在于，包括：

获取模块，用于从不同数据源获取N个待核对数据集；N为正整数；所述N个待核对数据集之间具有唯一关联主键；

处理模块，用于针对任一待核对数据集，对所述待核对数据集进行分片，得到多个数据集分片，并将所述多个数据集分片进行分布式存储；

针对所述N个待核对数据集中的任一关联主键值，并发遍历分布式存储的各数据集分片，得到核对记录；所述核对记录包括关联主键值以及所述关联主键值在所述N个待核对数据集中的各数据明细；所述核对记录中数据明细的数量不大于N；

根据所述各核对记录确定核对结果。

9.一种计算机设备，其特征在于，包括：

存储器，用于存储程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行权利要求1至7任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行权利要求1至7任一项所述的方法。