[发明专利]缓存处理方法、装置、电子设备和存储介质在审
申请号: | 202110692746.3 | 申请日: | 2021-06-22 |
公开(公告)号: | CN113448997A | 公开(公告)日: | 2021-09-28 |
发明(设计)人: | 曾林远;杨旭荣 | 申请(专利权)人: | 深信服科技股份有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/27 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 贾伟;张颖玲 |
地址: | 518055 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 缓存 处理 方法 装置 电子设备 存储 介质 | ||
本申请实施例提供了一种缓存处理方法、装置、电子设备和存储介质,该方法包括:获取待缓存的集群数据;按照待缓存的集群数据中每一类数据的数据类型,对待缓存的集群数据中至少一类数据进行数据聚合,得到聚合结果;聚合结果包括至少一类数据的聚合数据;根据至少一类数据中每类数据的聚合数据,建立待缓存的集群数据对应的缓存数据。基于本申请提供的缓存处理方法,可以提高对待缓存的集群数据进行数据存储的实时性。
技术领域
本申请实施例涉及分布式存储技术领域,尤其涉及一种缓存处理方法、装置、电子设备和计算机存储介质。
背景技术
在分布式云场景下,待缓存的集群数据可以包括云平台纳管的节点资源的结构化数据、云平台服务的业务数据库的数据、节点资源的运行状态数据、节点资源的监控数据等,在将待缓存的集群数据组装成符合云平台的业务需求的数据时,需要对待缓存的集群数据进行持续的、周期性的数据采集。
同时,为了保障对待缓存的集群数据进行数据存储的可靠性,需要将待缓存的集群数据进行冗余备份,为此,云平台的后端采用数据一写多读的方式进行数据存储,在冗余备份时数据写入的效率低。
随着云平台纳管的集群资源的数量越来越多,待缓存的集群数据的数据量呈现持续增长,使得对待缓存的集群数据进行数据采集时的压力、云平台的后端在数据写入时的压力线性增长,对待缓存的集群数据进行数据存储的实时性难以保证。因此,如何提高对待缓存的集群数据进行数据存储的实时性成为亟待解决的重要问题。
发明内容
本申请实施例提供了一种缓存处理方法、装置、电子设备和计算机存储介质,可以提高对待缓存的集群数据进行数据存储的实时性。
本申请实施例提供的一种缓存处理方法,包括:
获取待缓存的集群数据;
按照所述待缓存的集群数据中每一类数据的数据类型,对所述待缓存的集群数据中至少一类数据进行数据聚合,得到聚合结果;所述聚合结果包括至少一类数据的聚合数据;
根据所述至少一类数据中每类数据的聚合数据,建立所述待缓存的集群数据对应的缓存数据。
在一种实现方式中,所述根据所述至少一类数据中每类数据的聚合数据,建立所述待缓存的集群数据对应的缓存数据,包括:
确定第一对应关系,所述第一对应关系表示所述聚合数据的数据类型和缓存表的标识的对应关系;
根据所述第一对应关系,将所述每类数据的聚合数据缓存至对应的缓存表。
在一种实现方式中,所述根据所述第一对应关系,将所述每类数据的聚合数据缓存至对应的缓存表,包括:
确定第二对应关系,所述第二对应关系表示所述每类数据的聚合数据对应的缓存表和缓存单元的对应关系;所述缓存单元用于存储所述缓存表;
根据所述第一对应关系和所述第二对应关系,将所述每类数据的聚合数据缓存至对应的缓存单元中的缓存表。
在一种实现方式中,所述根据所述第一对应关系和所述第二对应关系,将所述每类数据的聚合数据缓存至对应的缓存单元中的缓存表,包括:
确定缓存单元集合,所述缓存单元集合包括至少一个所述缓存单元;
在所述缓存单元集合中增加新的缓存单元时,将所述至少一个所述缓存单元中的缓存表迁移至所述新的缓存单元。
在一种实现方式中,所述按照所述待缓存的集群数据中每一类数据的数据类型,对所述待缓存的集群数据中至少一类数据进行数据聚合,得到聚合结果,包括:
获取配置信息,所述配置信息用于指示所述至少一类数据中的目标数据类型;所述目标数据类型为待进行数据聚合的数据类型;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深信服科技股份有限公司,未经深信服科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110692746.3/2.html,转载请声明来源钻瓜专利网。