[发明专利]一种redis数据缓存的value的检测和分片的方法及其系统在审
申请号: | 202211248782.1 | 申请日: | 2022-10-12 |
公开(公告)号: | CN115599816A | 公开(公告)日: | 2023-01-13 |
发明(设计)人: | 刘德建;叶伟;李佳 | 申请(专利权)人: | 福建天晴数码有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455 |
代理公司: | 福州旭辰知识产权代理事务所(普通合伙) 35233 | 代理人: | 程勇 |
地址: | 350000 福建省福州市君竹路83*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 redis 数据 缓存 value 检测 分片 方法 及其 系统 | ||
1.一种redis数据缓存的value的检测和分片的方法,其特征在于:所述方法包括如下步骤:
步骤S1、设置redis数据缓存慢查询的阈值,通过redis数据缓存读取前后日志记录的时间差获取redis读取时间,当redis读取时间超过阈值,则把慢查询的redis数据缓存的key异步写入日志;
步骤S2、监控慢查询日志,读取慢查询的redis数据缓存的key,读取redis数据缓存的key对应的value如果小于10KB则不进行操作,结束流程,如果大于100KB则进行删除redis数据缓存的key,如果value在10-100KB之间,则进入步骤S3;
步骤S3、将redis数据缓存的value根据预设值进行按组分片,每组value值的内容为value_1,value_2,value_3,以此类推直到最后一个分片不加后缀结尾;则分组后的分片集合为{(key值,value值_1),(key值_1,value值_2)...(key值_N-1,value值_N),(key值_N,value值)};
步骤S4、提供一redis读取接口,读取rediss数据缓存key的value,如果value是以_1结尾表示此redis数据缓存是个被分片的value,继续读取下一个数据分片key值_1的数据,以此类推读到最后一个分片,拼接所有分片的字符返回给客户端。
2.根据权利要求1所述的一种redis数据缓存的value的检测和分片的方法,其特征在于:步骤S1的实现方式进一步具体为:设置一个redis慢查询的阈值为100ms,超过100ms的查询则是因为value太大引起的慢查询;通过redis读取前后日志记录的时间差,得到redis的读取时间,如果超过阈值100ms,则把慢查询的redis数据缓存key异步写入日志,不采用同步写入日志的方式是为了不降低系统的吞吐量。
3.根据权利要求1所述的一种redis数据缓存的value的检测和分片的方法,其特征在于:步骤S3的实现方式进一步具体为:将redis数据缓存的value根据预设值进行按组分片,避免单个value太大导致查询单次超时;则分组的方式为:key:value_1;key_1:value_2;key_2:value_3;....key_N-1:value_N;key_N:value,其中N是大于1的整数;则分组后的分片集合为{(key值,value值_1),(key值_1,value值_2)...(key值_N-1,value值_N),(key值_N,value值)}。
4.根据权利要求1所述的一种redis数据缓存的value的检测和分片的方法,其特征在于:步骤S4的实现方式进一步具体为:提供一redis读取接口,通过redis读取接口读取rediss数据缓存key的value,如果value是以_1结尾表示此redis数据缓存是个被分片的value,继续读取下一个数据分片key值_1的数据;而数据分片key值_1对应的value是以_2结尾的,则继续读取下一个数据分片key值_2的数据,即将value的尾部后缀作为索引,去寻找下一个数据分片对应的key的相同尾部后缀,数据分片的最后一个value没有后缀则视为读取到所有的分片数据;则拼接value值_1+value值_2+...+value值_N+value值得到完整数据返回给客户端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建天晴数码有限公司,未经福建天晴数码有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211248782.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置