[发明专利]一种基于IPFS集群的数据灾备方法与设备在审
申请号: | 202110256708.3 | 申请日: | 2021-03-09 |
公开(公告)号: | CN112965859A | 公开(公告)日: | 2021-06-15 |
发明(设计)人: | 李峰;石涛声;李昕;李涛;郭本信 | 申请(专利权)人: | 上海焜耀网络科技有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F16/22;G06F16/27 |
代理公司: | 上海百一领御专利代理事务所(普通合伙) 31243 | 代理人: | 王奎宇;甘章乖 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 ipfs 集群 数据 方法 设备 | ||
本申请的目的是提供一种基于IPFS集群的数据灾备方案。该方案先启动多个IPFS节点作为灾备节点,将该多个灾备节点组织成分布式灾备集群;再基于原始文件生成备份文件,将所述备份文件同步到所述灾备节点,通过IPFS为每个所述备份文件生成对应的CID,通过pin操作将所述备份文件的CID加入到pinset数据库;然后所述分布式灾备集群中的其他灾备节点通过共识算法,把所述pinset数据库的更新数据同步到本节点持久化存储中。本申请可以高效灵活地实现数据灾备,解决了现有技术方案对同城或异地容灾中心依赖大,对带宽和存储容量的要求高,以及单点故障、防御DDoS攻击差等一系列问题。
技术领域
本申请涉及信息技术领域,尤其涉及一种基于IPFS集群的数据灾备技术。
背景技术
数据灾备全称为数据灾难备份,是指为防止出现操作失误或系统故障导致数据丢失,而将系统全部或部分数据集合,从应用主机的硬盘或阵列复制到其他存储介质的过程。目前的方案一般是将本地备份数据远程复制到同城或异地容灾中心,当本地备份数据丢失或故障时,再从灾备中心进行数据恢复。
无论是同城容灾还是异地容灾,其本质问题都是如何应对分布式存储系统中的节点故障。为应对该问题,现有的技术方案主要有多副本技术方案和纠删码技术方案。然而,现有的技术方案存在如下缺点:(1)在多副本技术方案中,副本复制粒度太大;(2)在纠删码技术方案中,纠删码复制读、写、更新操作开销太大;(3)大规模存储系统的故障检测时间和恢复时间过长;(4)灾难恢复不够智能和灵活。
发明内容
本申请的一个目的是提供一种基于IPFS集群的数据灾备方法与设备。
根据本申请的一个方面,提供了一种基于IPFS集群的数据灾备方法,其中,所述方法包括:
启动多个IPFS节点作为灾备节点,将该多个灾备节点组织成分布式灾备集群;
基于原始文件生成备份文件,将所述备份文件同步到所述灾备节点,通过IPFS为每个所述备份文件生成对应的CID,通过pin操作将所述备份文件的CID加入到pinset数据库;
所述分布式灾备集群中的其他灾备节点通过共识算法,把所述pinset数据库的更新数据同步到本节点持久化存储中。
根据本申请的另一个方面,还提供了一种计算设备,其中,该设备包括用于存储计算机程序指令的存储器和用于执行计算机程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发所述设备执行所述的基于IPFS集群的数据灾备方法。
根据本申请的又一个方面,还提供了一种计算机可读介质,其上存储有计算机程序指令,所述计算机可读指令可被处理器执行以实现所述的基于IPFS集群的数据灾备方法。
本申请提供的方案中,先启动多个IPFS节点作为灾备节点,将该多个灾备节点组织成分布式灾备集群;再基于原始文件生成备份文件,将所述备份文件同步到所述灾备节点,通过IPFS为每个所述备份文件生成对应的CID,通过pin操作将所述备份文件的CID加入到pinset数据库;然后所述分布式灾备集群中的其他灾备节点通过共识算法,把所述pinset数据库的更新数据同步到本节点持久化存储中。本申请可以高效灵活地实现数据灾备,解决了现有技术方案对同城或异地容灾中心依赖大,对带宽和存储容量的要求高,以及单点故障、防御DDoS攻击差等一系列问题。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其他特征、目的和优点将会变得更明显:
图1是根据本申请实施例的一种基于IPFS集群的数据灾备方法流程图;
图2(a)~(c)是根据本申请实施例的一种链式数据存储方式示意图;
图3(a)~(c)是根据本申请实施例的一种利用分布式哈希表实现数据分布化组织的示意图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海焜耀网络科技有限公司,未经上海焜耀网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110256708.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置