[发明专利]分布式缓存管理方法、系统及数据管理系统有效
申请号: | 201710685559.6 | 申请日: | 2017-08-11 |
公开(公告)号: | CN107493327B | 公开(公告)日: | 2020-05-15 |
发明(设计)人: | 方旭东;丁善富 | 申请(专利权)人: | 杭州顺网科技股份有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 上海巅石知识产权代理事务所(普通合伙) 31309 | 代理人: | 王再朝;高磊 |
地址: | 310012 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 缓存 管理 方法 系统 数据管理 | ||
本申请提供一种分布式缓存管理方法、系统及数据管理系统,应用于包括至少一客户端、进行哈希运算的路由层、以及多个存储节点构建的分布式缓存网络中,其中,各该存储节点中预置有至少一个缓存实例,所述方法为从多个存储节点中确定多个缓存实例并提交业务请求;以及依据指定的冗余度将多个缓存实例配置为多组包括一主缓存实例及至少一副缓存实例的缓存实例集,能够确保映射于同一个区间或者哈希槽上的主缓存实例和副缓存实例被配置在不同的存储节点上,进而确保即便一个存储节点上所有的缓存实例都被挂起时,也不会导致业务数据部分丢失,进而可以确保操作业务能够正常运行。
技术领域
本申请涉及网络技术领域,特别是涉及一种分布式缓存管理方法、系统及数据管理系统。
背景技术
目前,业内通常采用分布式数据存储系统进行数据存储,分布式数据存储系统既具有集群系统的可扩/缩容的特性,又可以进行分布式操作。因此,在数据存储量发生变化时,分布式数据存储系统能够通过增加/移除集群中的数据存储节点实现对分布式数据存储系统的扩/缩容。
在现有的分布式数据存储系统中,通常可以采用一致性哈希算法对集群进行分片,而后对键值对数据(key-value)等进行存储,比如MemCache分布式缓存系统和Redis分布式缓存系统。其中,MemCache是一个自由、源码开放、高性能、分布式的分布式内存对象缓存系统,用于动态Web应用以减轻数据库的负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高了网站访问的速度。MemCaChe是一个存储键值对的HashMap,在内存中对任意的数据(比如字符串、对象等)所使用的key-value存储,数据可以来自数据库调用、API调用,或者页面渲染的结果。Redis是一个高性能的键值对数据库,也称非关系型数据库,它支持主从同步,数据可以从主服务器向任意数量的从服务器上同步,从服务器可以是关联其他从服务器的主服务器,这使得Redis可执行单层树复制。开源数据库Redis的出现,很大程度补偿了关系型数据库存储的不足,在部分场合可以对关系型数据库起到很好的补充作用。
以Redis为例,Redis是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。Redis是一个高性能的Key-value数据库,和MemCache类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sorted set-有序集合)和hash(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,Redis支持各种不同方式的排序。与MemCache一样,为了保证效率,数据都是缓存在内存中。区别的是Redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从或主副)同步。但在现有技术中,无论是MemCache分布式缓存系统还是Redis分布式缓存系统,都在如何实现更高可靠性的备份性能上,即如何解决配置缓存实例的主从或主副备份的解决方案尤为重视。
发明内容
鉴于以上所述现有技术的缺点,本申请的目的在于提供一种分布式缓存管理方法、系统及数据管理系统,用于解决解决配置缓存实例的主从或主副本备份的问题。
为实现上述目的及其他相关目的,本申请的第一方面,提供一种分布式缓存管理方法,应用于包括至少一客户端、进行哈希运算的路由层、以及多个存储节点构建的分布式缓存网络中,其中,各该存储节点中预置有至少一个缓存实例,所述分布式缓存管理方法包括以下步骤:从所述多个存储节点中确定多个缓存实例并提交业务请求;以及依据指定的冗余度将所述多个缓存实例配置为多组包括一主缓存实例及至少一副缓存实例的缓存实例集,使每一组缓存实例集中的主缓存实例及与其对应的至少一个副缓存实例映射至相同的哈希槽中,并确保每一组缓存实例集中的主缓存实例及与其对应的至少一个副缓存实例位于不同的存储节点中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州顺网科技股份有限公司,未经杭州顺网科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710685559.6/2.html,转载请声明来源钻瓜专利网。