[发明专利]一种分布式系统数据一致性处理方法、装置和系统

权利要求书

1.一种分布式系统数据一致性处理装置，其特征在于，所述装置包括配置模块、数据库消息生成模块和数据一致性比对任务模块，其中：

所述配置模块，用于预先配置监控对象以及对应所述监控对象的监控规则；

所述数据库消息生成模块，用于解析对应所述监控对象的事务日志文件，当确定所述监控对象发生变化时，实时生成业务数据变更消息，向所述数据一致性比对任务模块发送所述业务数据变更消息；其中，所述业务数据变更消息包含对应所述监控对象的待比对业务数据；

所述数据一致性比对任务模块，用于接收所述数据库消息生成模块发送的所述业务数据变更消息，根据所述对应所述监控对象的监控规则对所述业务数据变更消息中包含的所述待比对业务数据实时进行比对，获得比对结果。

2.根据权利要求1所述的装置，其特征在于，所述数据库消息生成模块具体用于：

当预置的所述监控对象来源于不同数据库时，分别解析各数据库对应所述监控对象的事务日志文件，当确定所述监控对象在任一数据库对应的事务日志文件中发生变化时，实时生成业务数据变更消息，向所述数据一致性比对任务模块发送所述业务数据变更消息；其中，所述业务数据变更消息包含所述监控对象在各数据库中的事务日志文件对应的业务数据。

3.根据权利要求1或2所述的装置，其特征在于，所述数据一致性比对任务模块具体用于：

当接收到所述数据库消息生成模块发送的业务数据变更消息时，将所述数据变更消息包含的所述待比对业务数据存储至本地数据库，利用所述本地数据库根据所述对应所述监控对象的监控规则对所述待比对业务数据实时进行一致性比对，获得比对结果。

4.根据权利要求1所述的装置，其特征在于，所述数据一致性比对任务模块还用于：

对所述待比对业务数据进行哈希运算，根据哈希运算结果对所述待比对业务数据进行分组，将不同组的业务数据分配到不同的任务机上以根据预置的所述监控规则对所述业务数据实时进行比对。

5.根据权利要求1所述的装置，其特征在于，所述装置还包括：

海量存储模块，用于接收并存储所述数据一致性比对任务模块发送的比对结果；以及，接收查询请求，返回与所述查询请求对应的比对数据。

6.根据权利要求1所述的装置，其特征在于，所述装置还包括：

一致性恢复模块，用于当所述比对结果表明业务数据存在不一致时，实现业务数据的一致性恢复；

其中，所述一致性恢复模块具体用于：

根据所述配置模块预先配置的业务应用的远程接口和调用参数，调用所述业务应用以实现业务数据的一致性恢复。

7.根据权利要求1所述的装置，其特征在于，所述装置还包括：

监控模块，配置用于监控所述数据一致性比对任务模块的运行状态，当所述运行状态表明未比对数据的数量超过预设阈值时，输出报警信息。

8.一种分布式系统，其特征在于，所述分布式系统包括数据一致性处理装置和业务数据库，其中：

所述业务数据库用于存储业务数据；

所述数据一致性处理装置用于预先配置监控对象以及对应所述监控对象的监控规则；解析对应所述监控对象的业务数据库的事务日志文件，当确定所述监控对象发生变化时，实时生成业务数据变更消息；其中，所述业务数据变更消息包含对应所述监控对象的待比对业务数据；以及，根据所述对应所述监控对象的监控规则对所述业务数据变更消息中包含的所述待比对业务数据实时进行比对，获得比对结果。

9.根据权利要求8所述的系统，其特征在于，所述数据一致性处理装置具体用于：

当预置的所述监控对象来源于不同数据库时，分别解析各数据库对应所述监控对象的事务日志文件，当确定所述监控对象在任一数据库对应的事务日志文件中发生变化时，实时生成业务数据变更消息，向所述数据一致性比对任务模块发送所述业务数据变更消息；其中，所述业务数据变更消息包含所述监控对象在各数据库中的事务日志文件对应的业务数据。