[发明专利]一种多路实时视频数据存储系统及其进行缓存控制的方法

权利要求书

1. 一种基于HDFS的多路实时视频数据存储系统，所述存储系统包括与主机连接的主机访问接口和与存储节点连接的存储节点访问接口，以及用于存储缓存文件的系统缓存和对所述系统缓存进行缓存控制的系统控制器，其特征在于，

所述系统缓存包括动态随机存取存储器和固态硬盘，所述动态随机存取存储器用于缓存主机的主机读数据块和主机写数据块，所述固态硬盘用于存放主机写回所述存储系统的主机写数据块；

系统控制器包括缓存控制器，所述缓存控制器用于建立待写队列和已写队列，所述待写队列用于存放所述动态随机存取存储器的主机写队列中未写入存储节点的主机写数据块；所述已写队列用于存放所述动态随机存取存储器的主机写队列中已写入存储节点的主机写数据块。

2.根据权利要求1所述的基于HDFS的多路实时视频数据存储系统，其特征在于，所述缓存控制器还用于控制当动态随机存取存储器的主机写队列中加入一个新的主机写数据块时，所述待写队列也加入该主机写数据块。

3.根据权利要求2所述的基于HDFS的多路实时视频数据存储系统，其特征在于，所述缓存控制器还用于在将新的主机写数据库加入待写队列时，先查找所述待写队列中是否已包含该新的主机写数据块所在条带的其他主机写数据块，如是则将该新的主机写数据块数据块加入到所在条带的水平链表表尾，如不是则新建一个水平链表加入到其表尾；

并在 DRAM 缓存中主机写队列的一水平链表上的主机写数据块被写入到存储节点后将所述待写队列中对应的水平链表删除，并将该水平链表加入到已写队列当中。

4.根据权利要求1至3任一项所述的多路实时视频数据存储系统进行缓存控制的方法，其特征在于，

缓存控制器构建多个管理节点，包括一个主节点和多个活跃从节点；

活跃节点向主 节点注册自身信息；

同步活跃从节点缓存的初始元数据与主节点缓存的初始元数据。

5.根据权利要求4所述的多路实时视频数据存储系统进行缓存控制的方法，其特征在于，所述活跃从节点向主节点注册自身信息的步骤具体包括：

活跃从节点发送一个包含IP地址的注册请求给主节点；

当主节点收到这个请求时，通过将包含在请求信息中的活跃从节点IP地址信息写入活跃从节点的IP地址列表，注册该活跃从节点。

6.根据权利要求5所述的多路实时视频数据存储系统进行缓存控制的方法，其特征在于，所述活跃从节点向主节点注册自身信息的步骤具体还包括：

主节点发送一个带所述IP地址列表内容的应答信息给所有已经被注册到主节点IP地址列表中的活跃从节点；

活跃从节点收到所述应答信息后更新自身的IP地址列表，并发送确认信息给主节点；当主节点接收到所有活跃从节点的确认信息时检测通过，完成注册过程。

7.根据权利要求4所述的多路实时视频数据存储系统进行缓存控制的方法，其特征在于，所述同步活跃从节点缓存的初始元数据与主节点缓存的初始元数据的步骤具体包括：检测文件版本、检测分布式文件系统映像文件和同步初始元数据。

8.根据权利要求4所述的多路实时视频数据存储系统进行缓存控制的方法，其特征在于，所述同步活跃从节点缓存的初始元数据与主节点缓存的初始元数据步骤之后还包括：

在客户端进行数据复制时，主节点与活跃从节点之间进行元数据同步。

9.根据权利要求8所述的多路实时视频数据存储系统进行缓存控制的方法，其特征在于，所述主节点与活跃从节点之间进行元数据同步的步骤具体包括：

在主节点端，通过一元数据容器组件从客户端请求处理线程中收集元数据；所述元数据容器组件控制内存写的处理、磁盘写的处理以及多个客户端并发请求的提交；

在活跃从节点端，通过一接收器组件将收到的元数据放入元数据缓冲区中，并对获取的元数据进行内存读或磁盘读的处理。