[发明专利]一种数据处理的方法及装置在审
申请号: | 202010725337.4 | 申请日: | 2020-07-24 |
公开(公告)号: | CN111858676A | 公开(公告)日: | 2020-10-30 |
发明(设计)人: | 孟浩浩;杨威 | 申请(专利权)人: | 政采云有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/2457 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 刘晓楠 |
地址: | 310024 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 | ||
1.一种数据处理的方法,其特征在于,应用于数据缓存系统,所述数据缓存系统包括热度缓存区和粒度缓存区;
所述数据处理的方法包括:
S1、接收用户的第i查询请求,所述第i查询请求包含待查询数据的身份标识号码ID,i为正整数;
S2、基于所述待查询数据的ID在数据库中获取目标数据;
S3、将所述目标数据基于预设存储规则存储于所述粒度缓存区中,从粒度缓存区提取所述目标数据并基于预设热度规则将所述目标数据存储于所述热度缓存区中,从热度缓存区提取所述目标数据并返回至用户,其中所述存储规则根据数据粒度确定,所述热度规则根据数据的访问频率及时效性确定。
2.根据权利要求1所述的方法,其特征在于,还包括:
接收用户的第j查询请求,所述第j查询请求包含待查询数据的ID,其中ji;
基于所述待查询数据的ID在所述热度缓存区中进行查询具有所述ID的目标数据;
在所述热度缓存区查询到所述目标数据的情况下,将所述目标数据返回至用户,并结束当前查询流程;
在所述热度缓存区未查询到所述目标数据的情况下,则基于所述待查询数据的ID在所述粒度缓存区中进行查询具有所述ID的目标数据;
在所述粒度缓存区查询到所述目标数据的情况下,则基于预设热度规则将所述目标数据存储于所述热度缓存区中,从热度缓存区提取所述目标数据并返回至用户;
在所述粒度缓存区未查询到所述目标数据的情况下,则继续执行步骤S2至S3。
3.根据权利要求1所述的方法,其特征在于,在将所述目标数据基于预设存储规则存储于所述粒度缓存区之前,还包括:
为粒度缓存区配置连续的n个层级缓存区,n为大于等于2的正整数;
在所述目标数据为包括至少两种类型的业务数据的组合数据的情况下,将所述目标数据基于预设存储规则存储于所述粒度缓存区中,包括:
以所述目标数据为第一粒度数据并存储于第一层级缓存区;
将具有相同类型的业务数据的两组第k粒度数据基于相同类型的业务数据进行聚合得到第k+1粒度数据,将所述第k+1粒度数据存储于第k层级缓存区,其中n≥k≥1,且k为整数;
将k自增1,判断k是否小于等于n;
如果k≤n,则继续执行将具有相同类型的业务数据的两组第k粒度数据基于相同类型的业务数据进行聚合得到第k+1粒度数据;否则,结束聚合过程。
4.根据权利要求2所述的方法,其特征在于,所述将所述目标数据基于预设热度规则存储于热度缓存区中,包括:
判断所述目标数据是否符合预设的第一热度规则或预设的第二热度规则;
将符合预设的第一热度规则的目标数据储存于所述热度缓存区中的第一热度缓存区,其中所述第一热度规则包括第一访问频率区间或第一时效时间区间;
将符合预设的第二热度规则的目标数据储存于所述热度缓存区中的第二热度缓存区,其中所述第二热度规则包括第二访问频率区间或第二时效时间区间。
5.根据权利要求4所述的方法,其特征在于,所述基于所述待查询数据的ID在所述热度缓存区中查询目标数据,包括:
基于所述待查询数据的ID在所述第一热度缓存区中查询目标数据;
当在所述第一热度缓存区未查询到所述目标数据的情况下,则在所述第二热度缓存区中查询目标数据。
6.根据权利要求2所述的方法,其特征在于,所述基于所述待查询数据的ID在所述粒度缓存区中查询目标数据,包括:
在所述粒度缓存区的第n层级缓存区的第n粒度数据中查询目标数据;
在第n层级缓存区中未查询到目标数据的情况下,在第k层级缓存区的第k粒度数据中查询目标数据,其中n≥k≥1,且k为整数;
如果在第k层级缓存区未查询到目标数据的条件下,将k自减1,判断k是否小于等于1;
若是,则继续执行在第k层级缓存区的第k粒度数据中查询目标数据;
否则结束查询。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于政采云有限公司,未经政采云有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010725337.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电力高低压横担制作加工方法
- 下一篇:一种屏幕测试工装及测试方法