[发明专利]一种基于NAS协议的数据存储系统有效
申请号: | 202110674904.2 | 申请日: | 2021-06-17 |
公开(公告)号: | CN113296714B | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 刘志军 | 申请(专利权)人: | 杭州海康威视系统技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 孙翠贤;高莺然 |
地址: | 310051 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 nas 协议 数据 存储系统 | ||
1.一种基于NAS协议的数据存储系统,其特征在于,所述数据存储系统包括:第一网络附属存储NAS节点、至少一个第二NAS节点、NAS管理节点和云存储子系统;
所述第一NAS节点,用于接收第一用户端发送的第一存储路径和待存储数据文件,并将所述第一存储路径发送至所述NAS管理节点;
所述NAS管理节点,用于基于预设的存储路径与第二NAS节点的对应关系,从所述至少一个第二NAS节点中,确定所接收到的第一存储路径对应的第一目标NAS节点,向所述第一NAS节点反馈所述第一目标NAS节点的第一节点信息;
所述第一NAS节点,还用于基于所接收到的第一节点信息,向所述第一目标NAS节点上报所述待存储数据文件的第一元数据信息,以使所述第一目标NAS节点存储所接收到的第一元数据信息;将所述待存储数据文件存储至所述云存储子系统,并在所述待存储数据文件存储完成后,向所述第一目标NAS节点上报元数据更新信息,以使所述第一目标NAS节点利用所接收到的元数据更新信息,更新所存储的第一元数据信息;
所述云存储子系统,用于存储所述第一NAS节点发送的所述待存储数据文件。
2.根据权利要求1所述的系统,其特征在于,
所述第一NAS节点,还用于接收第二用户端发送的第二存储路径和待读取数据文件的文件信息,并将所述第二存储路径发送至所述NAS管理节点;
所述NAS管理节点,还用于基于所述对应关系,从所述至少一个第二NAS节点中,确定所接收到的第二存储路径对应的第二目标NAS节点,并向所述第一NAS节点反馈所述第二目标NAS节点的第二节点信息;
所述第一NAS节点,还用于基于所接收到的第二节点信息,从所述第二目标NAS节点中获取与所述文件信息相匹配的第二元数据信息,并基于所述第二元数据信息,从所述云存储子系统中读取所述待读取数据文件,将所获取到的所述待读取数据文件反馈至所述第二用户端;
所述云存储子系统,还用于向所述第一NAS节点发送所述待读取数据文件。
3.根据权利要求1所述的系统,其特征在于,所述待存储数据文件包括:多个子数据文件,每个子数据文件是所述第一用户端在每次IO交互过程中发送的;所述第一NAS节点将所述待存储数据文件存储至所述云存储子系统,包括:
根据各个子数据文件在所述待存储数据文件中的偏移地址,将各个子数据文件中的数据聚合为各个第一数据块;其中,每个第一数据块的数据量为预设的第一数据量;
按照各个第一数据块的聚合时间由早到晚的顺序,将各个第一数据块发送至预设的异步写缓存队列中;
按照先进先出的顺序,将所述异步写缓存队列中的各个第一数据块异步存储到所述云存储子系统。
4.根据权利要求3所述的系统,其特征在于,每个第一数据块携带有该第一数据块在所述待存储数据中的偏移地址;所述第一NAS节点将所述异步写缓存队列中的各个第一数据块异步存储到所述云存储子系统,包括:
按照每个第一数据块所携带的偏移地址和预设的分片大小,确定所述云存储子系统中用于存储该第一数据块的存储对象,并将该第一数据块存储至所确定的存储对象中;其中,所述分片大小是:将所述待存储数据文件按分片存储至所述云存储子系统中时,每个分片的大小。
5.根据权利要求2所述的系统,其特征在于,所述第一NAS节点基于所述第二元数据信息,从所述云存储子系统中读取所述待读取数据文件,将所获取到的所述待读取数据文件反馈至所述第二用户端,包括:
基于所述第二元数据信息,在所述云存储子系统中确定包含所述待读取数据文件的各个第二数据块;其中,每个第二数据块的数量为预设的第二数据量;
将各个第二数据块中,包括所述待读取数据文件的起始数据的目标数据块发送至预设的同步读缓存中,并将所述目标数据块中的数据反馈至所述第二用户端;
根据所包括的数据在所述云存储子系统中的偏移地址,将各个第二数据块中,除所述目标数据块之外的各个其他数据块发送至预设的异步读缓存队列中;
在所述目标数据块中的数据反馈完成后,按照先进先出的顺序,将所述异步读缓存中的首个第二数块发送至所述同步读缓存中,作为新的目标数据块,并返回所述将所述目标数据块中的数据反馈至所述第二用户端的步骤,直至满足数据读取停止条件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视系统技术有限公司,未经杭州海康威视系统技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110674904.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置