[发明专利]一种多级缓存数据存储、查询、调度以及处理方法及装置

说明书

本发明实施例提供一种多级缓存数据处理方法及装置，所述包括：将不同类型的数据存储到不同级别的缓存中；其中，不同级别的缓存的类型不同；响应于数据查询请求，根据所述数据查询请求对应的查询策略确定查询范围以及查询顺序，根据所述查询范围以及查询顺序依次查询多级缓存，获取与所述查询请求对应的数据。本发明实施例可以通过多级缓存存储不同类型的数据，提高数据的查询速度和效率，降低系统响应时间，提高系统的数据处理性能。

技术领域

本发明实施例涉及计算机技术领域，具体涉及一种多级缓存数据存储、查询、调度以及处理方法及装置。

背景技术

数据库是按照数据结构来组织、存储和管理数据的仓库，数据库可以接收查询请求返回与所述查询请求对应的数据。当查询请求过多或者过于频繁时，数据库的响应时间会变长，甚至会崩溃。举例说明，在电商平台中一般使用数据库存储商品及相应的优惠信息，在双十一大促、黑色星期五、周年庆等促销日的特定时刻，数据库会接收到用户大量的访问请求，给数据库带来大量的压力。为了使得数据库不被击穿，一些数据处理系统使用分布式远程缓存存储相应的数据。在这种实现方式中，可以将数据库的大量数据存储到不同的机器中，来应对大批量的访问请求。

然而，发明人在实现本发明的过程中发现，若仅使用分布式远程缓存来存储数据，由于单个计算节点的访问量是有限的，当访问请求超出单个计算节点的访问限制时，仍然会造成系统响应时间长甚至系统处于崩溃边缘的问题。

发明内容

本发明实施例提供了一种多级缓存数据存储、查询、调度以及处理方法及装置，可以通过多级缓存存储不同类型的数据，提高数据的查询速度和效率，降低系统响应时间，提高系统的数据处理性能。

为此，本发明实施例提供如下技术方案：

第一方面，本发明实施例提供了一种多级缓存数据处理方法，包括：将不同类型的数据存储到不同级别的缓存中；其中，不同级别的缓存的类型不同；响应于数据查询请求，根据所述数据查询请求对应的查询策略确定查询范围以及查询顺序，根据所述查询范围以及查询顺序依次查询多级缓存，获取与所述查询请求对应的数据。

第二方面，本发明实施例提供了一种多级缓存数据处理方法，应用于数据处理系统，所述数据处理系统包括多级缓存，所述多级缓存包括第一级缓存、第二级缓存、第三级缓存，所述方法包括：将预测热点数据存储到第一级缓存中；将实时热点数据存储到第二级缓存中；将全量数据存储到第三级缓存中；其中，所述第一级缓存的类型为堆外内存，所述第二级缓存的类型为堆内内存，所述第三级缓存的类型为分布式远程缓存；响应于数据查询请求，根据所述数据查询请求对应的查询策略确定查询范围以及查询顺序，根据所述查询范围以及查询顺序依次查询多级缓存，获取与所述查询请求对应的数据。

第三方面，本发明实施例提供了一种多级缓存数据处理装置，包括：存储单元，用于将不同类型的数据存储到不同级别的缓存中；查询单元，用于响应于数据查询请求，根据所述数据查询请求对应的查询策略确定查询范围以及查询顺序，根据所述查询范围以及查询顺序依次查询多级缓存，获取与所述查询请求对应的数据。

第四方面，本发明实施例提供了一种多级缓存数据处理装置，包括：存储单元，用于将预测热点数据存储到第一级缓存中；将实时热点数据存储到第二级缓存中；将全量数据存储到第三级缓存中；其中，所述第一级缓存的类型为堆外内存，所述第二级缓存的类型为堆内内存，所述第三级缓存的类型为分布式远程缓存；查询单元，用于响应于数据查询请求，根据所述数据查询请求对应的查询策略确定查询范围以及查询顺序，根据所述查询范围以及查询顺序依次查询多级缓存，获取与所述查询请求对应的数据。