[发明专利]高可用的数据存储读写方法、系统、装置及设备在审
申请号: | 202210168245.X | 申请日: | 2022-02-23 |
公开(公告)号: | CN114546276A | 公开(公告)日: | 2022-05-27 |
发明(设计)人: | 王力朋;郭沛 | 申请(专利权)人: | 华云数据控股集团有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/14;G06F16/9537 |
代理公司: | 北京三聚阳光知识产权代理有限公司 11250 | 代理人: | 王娜 |
地址: | 214000 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 可用 数据 存储 读写 方法 系统 装置 设备 | ||
1.一种高可用的数据存储读写方法,其特征在于,所述方法包括:
接收数据读请求以及数据写请求中的至少一者;
当接收到所述数据写请求时,解析所述数据写请求得到待写入数据,并将所述待写入数据同时写入各个存储节点;
当接收到所述数据读请求时,解析所述数据读请求获得数据读取条件,以便根据所述数据读取条件执行数据读取操作;
其中,所述数据读取条件包括近期数据读取条件以及远期数据读取条件中的至少一者;所述根据所述数据读取条件执行数据读取操作包括根据近期数据读取条件从各个存储节点中读取数据和/或根据远期数据读取条件从对象存储中读取数据;所述对象存储用于存储所述各个存储节点的备份数据。
2.根据权利要求1所述的方法,其特征在于,每个所述存储节点按照预设的第一周期将写入的数据同时备份至对象存储。
3.根据权利要求2所述的方法,其特征在于,每个存储节点下的边车进程按照预设的第二周期扫描对应存储节点在上一间隔周期内新增的数据,将所述新增的数据压缩成文件推送至对象存储中。
4.根据权利要求3所述的方法,其特征在于,每个存储节点下的边车进程扫描间隔一致;每个所述存储节点下的边车进程的扫描的起始时间保持一致。
5.根据权利要求4所述的方法,其特征在于,每个存储节点按照指定时间周期对所述存储节点进行数据清理,以保留与执行数据清理的时间节点的时间之差在目标时间长度内的时序数据。
6.根据权利要求5所述的方法,其特征在于,所述当接收到所述数据读请求时,解析所述数据读请求获得数据读取条件,包括:
当接收到数据读请求后,解析所述数据读请求,获得数据写入时间;
当检测到所述数据写入时间包含在指定时间节点之后的第一时刻时,根据所述第一时刻生成所述近期数据读取条件;所述指定时间节点为与当前时刻相差所述目标时间长度的时间节点;
当检测到所述数据写入时间包含在指定时间节点之前的第二时刻时,根据所述第二时刻生成所述远期数据读取条件。
7.根据权利要求1至6任一所述的方法,其特征在于,当所述数据读取条件中包含远期数据读取条件以及近期数据读取条件时,所述根据所述数据读取条件执行数据读取操作,包括:
根据所述近期数据读取条件,读取所述各个存储节点中的近期数据;
根据所述远期数据读取条件,读取所述对象存储中的远期数据;
将所述近期数据去重后与远期数据合并,并将合并后的数据返回给客户端。
8.根据权利要求1至6任一所述的方法,其特征在于,所述方法还包括:
当检测到所述待写入数据成功写入至少一个存储节点时,生成写入成功标识,并将所述写入成功标识发送给客户端。
9.根据权利要求1至6任一所述的方法,其特征在于,所述解析所述数据写请求得到待写入数据,并将所述待写入数据同时写入各个存储节点,包括:
解析所述数据写请求,得到所述待写入数据;
读取可写入存储节点列表,获取所述各个存储节点,并将所述待写入数据同时写入所述各个存储节点;
所述方法还包括:
当检测到所述各个存储节点中的第一存储节点故障时,将所述第一存储节点从可写入存储节点列表中删除。
10.根据权利要求7所述的方法,其特征在于,所述根据所述近期数据读取条件,读取所述各个存储节点中的近期数据之前,还包括:
在可读取存储节点列表中获取所述各个存储节点;
所述方法还包括:
当检测到所述各个存储节点中的第二存储节点故障时,将所述第二存储节点从所述可读取存储节点列表中删除。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华云数据控股集团有限公司,未经华云数据控股集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210168245.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于西药学医疗用西药研磨装置
- 下一篇:一种知识图谱分析系统及方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置