[发明专利]一种修复数据的方法和装置

说明书

本申请实施例提供一种修复数据的方法和装置，用于减少业务节点修复缓存集群记录的执行时间，从而提升业务节点的系统性能。方法包括：获取样本组，样本组包括至少一个样本集合，样本集合包括缓存集群中的部分记录；根据样本组获取差错率，差错率表示样本组中异常记录占样本组中所有记录的比例，异常记录是指与数据库集群中的参考记录不同的记录，异常记录的地址与参考记录的地址一一对应。若差错率大于0小于第一阈值，则当缓存集群中的第一集合的摘要与数据库集群中的第二集合的摘要不同时，根据第二集合修复第一集合中的异常记录；第一集合包括缓存集群中的部分记录，第一集合的地址与第二集合的地址一一对应。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种修复缓存数据的方法和装置。

背景技术

如图1所示，分布式网络控制器集群包括缓存集群，数据库集群和业务集群。其中，缓存集群包括多个缓存节点，数据库集群包括多个数据库节点，业务集群包括多个业务节点。

业务节点在写记录的过程中，先将记录写入数据库集群，再将记录写入缓存集群。由于缓存集群的读写性能强于数据库集群的读写性能，因此业务节点一般从缓存集群中读取记录。若业务节点检测到缓存集群中没有要读取的记录(即缓存集群的记录缺失)，则向数据库集群发送请求；数据库集群根据该请求，向业务节点发送所请求的记录；业务节点接收到数据库集群发送的记录后，向数据库集群发送携带该记录的响应消息。由此可知，若缓存集群的记录缺失，则增加了业务节点访问缓存集群中的记录的开销，也增加了业务节点访问数据库集群中的记录的开销。

为了解决上述技术问题，业务节点可以在将记录写入缓存集群的过程中，将该记录持久化到持久化数据库中，然后，通过对比持久化数据库和缓存集群中的记录，从而对缓存集群中的记录进行修复。具体的：业务节点获取缓存集群中的部分记录作为样本缓存记录，并在持久化集群中获取与该样本缓存记录的地址相同的样本持久化记录；若确定样本缓存记录和样本持久化记录不相同，则通过对比缓存集群中的所有记录和持久化数据库中对应的记录，找出缓存集群丢失的记录的地址；最后，利用持久化数据库中的与丢失的记录的地址一一对应的记录，对缓存集群中的丢失的记录进行修复，从而保证缓存集群中的记录与持久化数据库中的记录一致，即保证缓存集群中的记录与数据库集群中的记录一致。

但是，上述方法，在业务节点修复缓存集群中的丢失的记录的过程中，需要对比缓存集群中的所有记录和持久化数据库中的对应的记录，因此，增加了业务节点修复缓存集群中的记录的执行时间，使系统性能下降。

发明内容

本申请提供一种修复数据的方法和装置，用于减少业务节点修复缓存集群中的记录的执行时间，从而提升业务节点的系统性能。

为了达到上述目的，本发明的实施例采用如下技术方案：

第一方面，提供一种修复数据的方法，应用于包括缓存集群和数据库集群的系统中，该方法可以包括：业务节点获取样本组，其中，样本组包括至少一个样本集合，样本集合包括缓存集群中的部分记录。业务节点根据样本组获取差错率，其中，差错率表示样本组中异常记录占样本组中所有记录的比例，异常记录是指与数据库集群中的参考记录不同的记录，异常记录的地址与参考记录的地址一一对应。若差错率大于0小于第一阈值，则当缓存集群中的第一集合的摘要与数据库集群中的第二集合的摘要不同时，根据第二集合修复第一集合中的异常记录；其中，第一集合包括缓存集群中的部分记录，第一集合的地址与第二集合的地址一一对应。由于本发明实施例提供的技术方案中，若缓存集群中的集合与数据库集群中与该集合对应的集合的摘要相同，则可以不对比缓存集群中的该集合中的每条记录和数据库集群中的该每条记录的参考记录。因此，可以缩短业务节点确定缓存集群中的异常记录的执行时间，提升了系统性能。