[发明专利]系统数据对账方法及装置、存储介质、电子设备

说明书

技术领域

本公开涉及数据处理技术领域，具体而言，涉及一种系统数据对账方法、系统数据对账装置、计算机可读存储介质以及电子设备。

背景技术

系统数据对账是指对两个系统对相同批次账单进行核对校验以发现不一致数据及单边数据；由于系统对账往往是面对海量级数据，因此对账的时间复杂度较高，较高的时间复杂度导致了系统对账成为了系统性能的瓶颈。

目前大部分系统数据的对账方式都是先将对方系统数据入库临时表，然后再将本地数据库中的数据与临时表中的数据进行比对。对比方式可以包括以下两种：一种是，通过批量循环本地数据库中的数据表，然后对相同单号逐次从临时表中查找对比，再将对比后对不一致的数据和单边数据进行打标处理，然后遍历临时表以及本地数据库获取打标异常数据；另一种是，通过关联原始数据表进行联合对比，再将对比后对不一致的数据和单边数据进行打标处理，然后遍历临时表以及本地数据库获取打标异常数据。

但是，上述两种比对方法强依赖于数据库。由于系统对账需要对数据库进行频繁的查询和更新操作且数据库的连接数量有限，；因此，海量数据的对账对数据库的压力非常高且很容易占满数据库连接，造成数据库服务中止，且海量数据的入库造成数据库资源的浪费；进一步的，上述两种对比方法对数据使用双重循环，因此时间复杂度很高，对账时效较差。

因此，需要提供一种的系统数据对账方法及装置。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种系统数据对账方法、系统数据对账装置、计算机可读存储介质以及电子设备，进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的一个或者多个问题。

根据本公开的一个方面，提供一种系统数据对账方法，包括：

接收对账服务器发送的对账请求，响应所述对账请求并获取第一待对账数据；

将所述第一待对账数据进行转化得到与所述第一待对账数据关联的HashMap；

将所述HashMap存储至Redis集群以使所述对账服务器从所述Redis集群中获取所述HashMap并计算所述HashMap与本地数据库中的第二待对账数据的差异性。

在本公开的一种示例性实施例中，在将所述HashMap存储至Redis集群之后，所述系统数据对账方法还包括：

判断所述HashMap是否存储成功；

在判断所述HashMap存储成功后，向所述对账服务器发送MQ消息以使所述对账服务器根据所述MQ消息处理对账流程。

在本公开的一种示例性实施例中，将所述第一待对账数据进行转化得到与所述第一待对账数据关联的HashMap包括：

对所述第一待对账数据的时间信息进行降维处理以得到与所述第一待对账数据关联的HashMap。

根据本公开的一个方面，提供一种系统数据对账方法，包括：

监听一MQ消息并在监听到所述MQ消息后，开启多个分布式任务并利用各所述分布式任务遍历第三待对账数据；

根据所述第三待对账数据的数据单号从Redis集群中获取与所述数据单号关联的HashMap数据；

计算所述第三待对账数据与所述HashMap数据的差异性。

在本公开的一种示例性实施例中，利用各所述分布式任务遍历第三待对账数据包括：

为各所述分布式任务配置一取值长度并根据各所述取值长度查询所述第三待对账数据以锁定对应长度的对账数据。

在本公开的一种示例性实施例中，计算所述第三待对账数据与所述HashMap数据的差异性包括：

判断所述第三待对账数据与所述HashMap数据是否一致；

在判断所述第三待对账数据与所述HashMap数据不一致时，将所述数据单号对应的第三待对账数据以及所述HashMap数据存储至本地数据库中。

在本公开的一种示例性实施例中，在计算所述第三待对账数据与所述HashMap数据的差异性之前，所述系统数据对账方法还包括：

删除所述HashMap数据中与所述数据单号对应的数据节点。

在本公开的一种示例性实施例中，在根据所述第三待对账数据的数据单号从Redis集群中获取与所述数据单号关联的HashMap数据之前，所述系统数据对账方法还包括：

根据所述第三待对账数据的数据单号判断所述HashMap数据中是否存在与所述数据单号对应的数据单号；