[发明专利]基于IPFS的分布式实时数据同步方法、节点设备及系统有效
申请号: | 202010844374.7 | 申请日: | 2020-08-20 |
公开(公告)号: | CN112035422B | 公开(公告)日: | 2022-03-25 |
发明(设计)人: | 佘鹏飞;孙晓鹏;李鑫;马骥;周小欠 | 申请(专利权)人: | 郑州信大捷安信息技术股份有限公司 |
主分类号: | G06F16/178 | 分类号: | G06F16/178;G06F16/182 |
代理公司: | 郑州德勤知识产权代理有限公司 41128 | 代理人: | 武亚楠 |
地址: | 450000 河南省*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 ipfs 分布式 实时 数据 同步 方法 节点 设备 系统 | ||
1.一种基于IPFS的分布式实时数据同步方法,其特征在于,包括以下步骤:
步骤S1,配置同步服务节点:在每个Fastdfs storage节点所属主机部署IPFS节点,以创建跨公网的私有p2p网络;
步骤S2,部署集成SDK,初始化所述集成SDK,加载Fastdfs存储目录到所述IPFS节点,通过IPFS节点订阅所有Fastdfs二级目录主题;
步骤S3,所述集成SDK实时监听Fastdfs storage 文件事件;
步骤S4,在所述集成SDK监听到Fastdfs storage 文件事件后,添加事件对应的文件所在的Fastdfs二级存储目录到IPFS节点,生成新的IPFS CID;
步骤S5,集成SDK依据监听到的Fastdfs storage 文件事件类型,判断是否将消息发布到特定订阅主题;
步骤S6,集成SDK接收对应同步服务节点订阅的主题更新的消息,执行对应的数据同步策略,实现跨公网的不同内网之间的数据实时同步。
2.根据权利要求1所述的基于IPFS的分布式实时数据同步方法,其特征在于,步骤S5中集成SDK依据监听到的Fastdfs storage 文件事件类型,判断是否将消息发布到特定订阅主题时,执行:
若集成SDK监听到同步服务节点发生源创建事件、源追加事件和源删除事件,则将消息发布到特定订阅主题;
若集成SDK监听到同步服务节点发生副本创建事件、副本追加事件和副本删除事件,则不将消息发布到特定订阅主题。
3.根据权利要求1所述的基于IPFS的分布式实时数据同步方法,其特征在于,还包括:标记所述集成SDK服务的同步服务节点类型;其中,所述同步服务节点类型包括源节点和同步节点,所述源节点为主中心同步服务节点,所述同步节点为备中心同步服务节点;
集成SDK依据监听到的Fastdfs storage 文件事件类型及对应的同步服务节点类型,判断是否将消息发布到特定订阅主题;若集成SDK监听到主中心同步服务节点发生源创建事件、源追加事件和源删除事件,则将消息发布到特定订阅主题;若集成SDK监听到备中心同步服务节点发生源创建事件、源追加事件和源删除事件,则不将消息发布到特定订阅主题。
4.根据权利要求2或3所述的基于IPFS的分布式实时数据同步方法,其特征在于,所述特定订阅主题的消息内容包括事件类型、Fastdfs fileId、时间戳和IPFS CID;
在进行数据同步时,所述同步服务节点基于所述时间戳确定另一内网中的各个同组同步服务节点对应的同步数据分块,并利用IPFS节点的特性同时从多个同步服务节点下载同步数据分块。
5.一种节点设备,其特征在于,包括同步服务节点和集成SDK;
所述同步服务节点,包括Fastdfs storage节点和IPFS节点,其中,所述IPFS节点基于Fastdfs集群中的Fastdfs storage节点进行分布式部署,所述Fastdfs storage节点用于提供业务数据文件存储服务;所述IPFS节点部署在每一Fastdfs storage节点的同一主机上,用于为所述Fastdfs集群提供跨公网的私有p2p网络;
所述集成SDK,设置Fastdfs文件消息监听服务、同步逻辑业务处理服务和消息主题服务;用于在监听到Fastdfs storage 文件事件后,添加事件对应的文件所在的Fastdfs二级存储目录到IPFS节点,生成新的IPFS CID;以及依据监听到的Fastdfs storage 文件事件类型,判断是否将消息发布到特定订阅主题;以及接收对应同步服务节点订阅的主题更新的消息,使用IPFS节点通过IPFS CID从处于同一内网的同组同步服务节点下载同步数据,或者从处于不同内网的同组同步服务节点下载同步数据,实现跨公网的不同内网之间的数据实时同步。
6.根据权利要求5所述的节点设备,其特征在于,所述集成SDK,用于在监听到对应同步服务节点发生源创建事件、源追加事件和源删除事件时,将消息发布到特定订阅主题;在监听到对应同步服务节点发生副本创建事件、副本追加事件和副本删除事件时,不将消息发布到特定订阅主题。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于郑州信大捷安信息技术股份有限公司,未经郑州信大捷安信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010844374.7/1.html,转载请声明来源钻瓜专利网。