[发明专利]一种基于大数据自动对账系统及方法

说明书

本发明提出一种基于大数据自动对账系统及方法，实时同步单元用于接收数据库变动消息，根据表名，采用不同的处理方式，过滤掉无用字段，保存在es搜索引擎；对账处理单元，用于从es搜索引擎拉取各业务相关数据，进行对账，保存对账结果到es搜索引擎；补单处理单元，用于将从es搜索引擎拉取对账失败订单的流水号及失败信息，根据失败信息找到相应业务系统，发起补单操作；对账单处理单元，用于从es搜索引擎拉取对账信息，按业务及商户分类，生成商户对账单。

技术领域

本发明涉及交易及财务数据处理领域，尤其涉及一种基于大数据自动对账系统及方法。

背景技术

当前网络交易系统订单支付成功后，成本计费、商户计费等服务系统通知存在以下问题：

其一，漏通知或通知失败频发。其二，漏缺通知情况无法预先得知。一般通过结算人员完成通道对账后提示处理。此问题一方面增加工作流程，加大人工处理成本；另方面直接影响通道对账及时和准确性，工作效率降低。其三，当对账流水单数量足够大时，往往由于海量的数据导致对账信息缓慢，效率极低。其四，信息安全对于财务系统十分重要，在信息处理过程中保证信息的安全是必要的。

本发明的技术方案至少解决了上述一个或多个问题，为确保交易数据与业务处理数据完整一致性，为商户对账创建准确的数据依据，降低人工成本，提高工作效率，增强信息安全，做出了创新性的贡献，上述四个问题所涉及的技术手段是本发明的主要创新点所在。本申请在对账系统中独创性的引入了ES搜索引擎，极大提到了对账效率；各个模块统一协调配合工作，缺一不可，不能割裂；对交易流水号的有关hash处理的步骤则提高了对账系统的安全性，并能节省存储空间。

在其中一种实施例中，本申请还引入区块链技术，能实时保证Merkle状态树与账户对应的状态一致，并能节省存储空间，也是本申请的独创发明点。

发明内容

发明提供一种基于大数据自动对账系统及方法及交易系统，可以自动为所缺失数据的系统进行补单，提高及时性和准确性。

由于本申请在对账系统中独创性的引入了es搜索引擎，极大提到了对账效率，而且，对于运营人员，可以在运营后台快速获取到es搜索引擎中各订单对账情况，便于运营维护。

一种基于大数据自动对账系统，包括：实时同步单元，用于接收数据库变动消息，根据表名，采用不同的处理方式，过滤掉无用字段，保存在es搜索引擎；对账处理单元，用于将从es搜索引擎拉取各业务相关数据，进行对账，保存对账结果到es搜索引擎；补单处理单元，用于将从es搜索引擎拉取对账失败订单的流水号及失败信息，根据失败信息找到相应业务系统，发起补单操作；对账单处理单元，用于从es搜索引擎拉取对账信息，按业务及商户分类，生成商户对账单。

本发明还提出了一种基于大数据自动对账方法，包括以下步骤：1)接收数据库变动消息，根据表名，采用不同的处理方式，过滤掉无用字段，保存在es搜索引擎；2)将从es搜索引擎拉取各业务相关数据，进行对账，保存对账结果到es搜索引擎；3)从es搜索引擎拉取对账失败订单的流水号及失败信息，根据失败信息找到相应业务系统，发起补单操作；4)从es搜索引擎拉取对账信息，按业务及商户分类，生成商户对账单。

所述自动对账系统还进一步包括：

实时同步流程：通过数据同步平台1监听数据库4的binlog日志，当日志发生改变时，数据同步平台1将把该变动消息发送给消息队列2；消息队列2通知实时同步单元3进行消息消费；实时同步单元3根据变动消息中的数据库表名，对于相同类型的订单进行整合，例如微信、支付宝、网银、快捷等支付订单都可以整合为收款订单。最后保存在es搜索引擎6。

所述自动对账系统还进一步包括：