[发明专利]一种保存数据的方法及系统有效
申请号: | 201210455442.6 | 申请日: | 2012-11-14 |
公开(公告)号: | CN103810209B | 公开(公告)日: | 2019-05-10 |
发明(设计)人: | 胡鸣人 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/00 | 分类号: | G06F16/00 |
代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 阎敏;宋志强 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 保存 数据 方法 系统 | ||
本发明提出一种数据存储方法和系统,其中方法包括:针对一份数据设置多个备份点,每个备份点按照各自的排序规则对该份数据进行排序并保存;其中,至少一个备份点为全量备份点,保存该份数据的全部内容;其他备份点为部分备份点,保存该份数据的部分内容。本发明能够提高数据的访问速度。
技术领域
本发明涉及数据处理和存储技术领域,尤其涉及一种保存数据的方法及系统。
背景技术
随着互联网技术的发展,互联网中存储和应用的数据越来越长,例如,UGC类应用越来越成为当前互联网的主流,微博、社交网络、博客都是UGC类主要应用。这些应用往往拥有海量用户,存储着海量的UGC数据。在这些应用中,对于某些特殊用户,其某类数据可能非常多、非常长,比如在微博应用中,活跃用户的粉丝列表(收听该用户的其他用户列表)会非常长,有些活跃用户的粉丝数甚至超过1个亿。
现有的数据的存储方案,大多是在数据库中存储,每张表维护一组长数据,比如将某人的粉丝信息建立一张表,表名以用户的Key区分。在外界读取这些数据时,需要后台存储服务根据不同的请求类型,对数据不同字段进行排序(如按时间排序、按地点排序、按字母大小排序等等),查找外界请求读取的数据,再返回结果;其中的计算量比较大,对请求也会有较大的时延。
更完备一些的方案,可以搭建多个热备数据库,一个主写点,多个备读点,实现对请求的分流。这种方式在读取数据时,也需要对存储数据进行排序,同样存在着计算量大和延时较大的问题,故外界对数据的访问速度较慢。
发明内容
本发明提供了一种数据存储方法,能够提高数据的访问速度。
本发明还提供了一种数据存储系统,能够提高数据的访问速度。
本发明的技术方案是这样实现的:
一种数据存储方法,包括:
针对一份数据设置多个备份点,每个备份点按照各自的排序规则对该份数据进行排序并保存;其中,至少一个备份点为全量备份点,保存该份数据的全部内容;其他备份点为部分备份点,保存该份数据的部分内容。
上述方法中,当接入层接收到针对该份数据的新增请求、修改请求或删除请求时,将所述新增请求、修改请求或删除请求发送至各个备份点;所述各个备份点按照各自的排序规则,对该份数据进行新增、修改或删除。
其中,全量备份点对该份数据进行新增时,按照新增数据的关键字(Key)将新增的数据加入到合适的位置并保存,或者更新原来的数据;
所述部分备份点对该份数据进行新增时,判断新增数据的Key是否属于该部分备份点所保存数据的Key的范围,如果是,则按照新增数据的Key查找新增数据的合适位置,将新增的数据加入到合适的位置并保存,或者更新原来的数据。
各个备份点对该份数据进行修改或删除时,按照各自的排序规则及修改或删除的数据的Key找到请求修改或删除的数据,对该数据进行修改或删除;
对于部分备份点,如果删除的数据量超过预先设定的门限值,则从所述全量备份点提取新的数据并保存。
上述方法中,当接入层接收到针对该份数据的读取请求时,根据所述读取请求的排序规则将所述读取请求转发至对应的备份点;所述对应的备份点将读取的数据反馈至接入层。
一种数据存储系统,系统包括接入层和多个备份点;其中,
针对一份数据,所述每个备份点按照各自的排序规则对该份数据进行排序并保存;其中,至少一个备份点为全量备份点,保存该份数据的全部内容;其他备份点为部分备份点,保存该份数据的部分内容。
所述接入层用于,当接收到针对一份数据的新增请求、修改请求或删除请求时,将所述新增请求、修改请求或删除请求发送至保存该份数据的各个备份点;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210455442.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:带USB接口的两侧出线的电池
- 下一篇:往返式物料输送装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置