[发明专利]一种数据更新方法、数据查询方法及装置

说明书

本申请实施例公开了一种数据更新方法、数据查询方法及装置。其中，数据更新方法包括：基于预设分片规则将接收到的数据更新请求所对应的待更新数据分别存储到预设数量的数据分片队列；响应于预设分片数据汇总触发指令遍历每一数据分片队列，在遍历每一数据分片队列时基于数据分片队列中的待更新数据，更新与数据分片队列对应的分片汇总数据缓存中的分片汇总数据；响应于预设数据汇总触发指令从分片汇总数据缓存中获取分片汇总数据，基于分片汇总数据更新汇总数据缓存中的汇总数据。利用本申请实施例，可以在保证数据一致性的基础下，改善系统性能，大大提高高并发场景下系统的可用性。

技术领域

本申请涉及互联网通信技术领域，特别涉及一种数据更新方法、数据查询方法及装置。

背景技术

随着互联网通信技术的日新月异，一些大型的互联网系统，由于业务复杂等原因，会出现大量分布式场景。在分布式事务场景中常常会出现大量高并发场景。在高并发场景下需要及时更新汇总数据以便于后续查询读取数据时保证数据的一致性。

现有技术中对于高并发场景下汇总数据的更新和读取主要有以下两种方案：第一种是纯数据库方案，是将汇总数据直接存储于数据库中，直接在数据库中更新和读取汇总数据。第二种是数据分片方案，是将一个汇总数据拆分成多个分片存储在数据库，在处理更新请求时只更新分片的汇总数据，在处理读取请求时借助数据库缓存实时汇总多个分片的汇总数据。

在实现本申请过程中，发明人发现现有技术中至少存在如下问题：

现有的纯数据库方案中直接在数据库中更新和读取汇总数据，虽然可以保证数据的高度一致性，但高并发场景下的性能差，且会存在数据库故障以及因数据库中数据存储更新操作需要对数据对象进行加锁，导致的数据热点等问题，系统的可用性不足。数据分片方案通过分片更新可以优化更新请求的热点问题，但更新和查询数据仍然直接操作数据库，存在更新请求的耗时延长、分片数据的汇总超时、以及对于已上线的项目改造时初始化分片的汇总数据难度较大等问题，高并发场景下的性能依然没有得到改善。

发明内容

本申请实施例的目的是提供一种数据更新方法、数据查询方法及装置，可以在保证数据一致性的基础下，改善系统性能，大大提高高并发场景下系统的可用性。

为解决上述技术问题，本申请实施例是这样实现的：

一种数据更新方法，包括：

基于预设分片规则将接收到的数据更新请求所对应的待更新数据分别存储到预设数量的数据分片队列；

响应于预设分片数据汇总触发指令遍历每一数据分片队列，在遍历每一数据分片队列时基于数据分片队列中的待更新数据，更新与数据分片队列对应的分片汇总数据缓存中的分片汇总数据；

响应于预设数据汇总触发指令从分片汇总数据缓存中获取分片汇总数据，基于分片汇总数据更新汇总数据缓存中的汇总数据。

一种数据查询方法，包括：

从服务器本地缓存中查询与查询请求相对应的汇总数据；

当所述服务器本地缓存中存在与查询请求相对应的汇总数据时，从所述服务器本地缓存中获取所述汇总数据；

当所述服务器本地缓存中不存在与查询请求相对应的汇总数据时，从分布式内存缓存中查询与所述查询请求相对应的汇总数据；

当所述分布式内存缓存中存在与所述查询请求相对应的汇总数据时，从所述分布式内存缓存中获取所述汇总数据；

其中，所述汇总数据通过下述步骤得到：

基于预设分片规则将数据更新请求对应的待更新数据存储到相应的数据分片队列，基于数据分片队列中的待更新数据更新分片汇总数据，基于分片汇总数据更新汇总数据；

所述数据更新请求与所述查询请求相对应。