[发明专利]一种处理海量级数据的视频图像信息的方法及数据库系统

权利要求书

1.一种处理海量级数据的视频图像信息数据库系统，其特征在于，包括：

采集接口，处于视频图像信息数据库系统的底层，作为采集前端系统与该视频图像信息数据库之间的服务接口，主要功能是用于在联网通信的基础上将视频图像信息实时写入视频图像信息数据库；

实时流处理引擎，从底层的采集接口获得采集的视频图像信息数据，生成分布式信息队列，并且为分布式信息队列按照数据特征和实时性要求实现视频图像信息数据的派发，以及用于对视频图像信息数据的流处理，生成基于事件内容的视频图像内容信息流；分布式信息队列包括实时性信息队列和非实时性信息队列；实时性信息队列可调用的分布式数据处理资源能够实现对该队列中的视频图像信息数据流的处理时间在预定时间延迟阈值以内，非实时性信息队列调用的分布式数据处理资源对视频图像信息数据流的处理时间允许具有相对实时性信息队列更长的延迟；

并且，所述分布式信息队列还包括结构化信息队列和非结构化信息队列；结构化信息队列实现对具有结构化数据格式的视频图像信息数据流的处理，而非结构化信息队列实现对非结构化数据格式的视频图像信息数据流的处理；并且，所述实时流处理引擎对视频图像信息数据流的流处理包括对其中视频片段和图片文件进行内容提取和标注，从而根据视频片段和图片的产生原因定义视频图像信息的事件内容，进而形成基于事件内容的结构化和/或非结构化数据，从而在原始的视频图像信息数据流的基础上结合所定义的事件建立了视频图像内容信息流；视频图像内容信息流包括事件内容描述信息以及与该事件内容描述信息关联的视频图像，该事件内容描述信息包括对与之关联的视频片段和图片的事件内容的描述，事件内容描述信息通过帧序列号关联到视频图像信息流当中的视频片段和图片；

所述实时流处理引擎对事件内容描述信息的定义过程中，首先执行对结构化和非结构化的视频图像信息流的帧抽样，从视频片段当中抽取若干关键帧图像，利用场景识别技术从视频图像信息流当中判断出不同的场景，进而对于每个场景下的视频片段抽取相应的关键帧图像；视频图像信息流当中的静态图片直接作为关键帧图像使用；对于被抽取的关键帧图像，所述实时流处理引擎进而实现内容提取以及事件内容描述信息的定义；对于结构化的视频图像信息，实时流处理引擎通过检索与关键帧图像关联的标签、描述信息、附加信息结构化数据，获得事件内容描述信息；对于非结构化的视频图像信息，实时流处理引擎执行自动、半自动或人工的内容提取和标注，从而由非结构化的视频图像信息当中生成事件内容描述信息；

分布式存储平台，基于事件内容的视频图像内容信息流作为数据源，并且基于分布式文件系统实现结构化和非结构化数据的分布式存储，所述分布式存储平台包括至少一个数据分配节点和若干分布式存储节点，数据分配节点提取视频图像内容信息流当中的事件内容描述信息，并且通过该事件内容描述信息分析当前的视频图像内容信息相关联的事件与各个分布式存储节点已有的事件之间的相关度，从而决定为当前视频图像内容信息所分配的分布式存储节点，数据分配节点根据事件类型，将具有相同或者相近事件类型的视频图像内容信息分配到同一个或者几个分布式存储节点；并且在分布式存储平台的每个分布式存储节点上，根据事件内容之间的关联性，同时放置结构化数据以及非结构化数据；

分布式内存分析层，具有请求解析调度单元，该请求解析调度单元对异构数据的查询分析请求进行解析并制定数据处理计算的优化分布调度方式，按照查询分析请求的数据对象所在位置调度数据处理计算，将数据分析处理计算分布到各数据存储节点上，实现海量数据的并行分析处理；

数据交换接口，用于实现视频图像信息数据共享交换；对于应用层的各种应用平台，通过相应的数据交换接口调用视频图像信息数据，对案件、事件、视频、图片进行新增、修改、删除、查询操作。

2.根据权利要求1所述的处理海量级数据的视频图像信息数据库系统，其特征在于，所述分布式存储节点对于所分配的结构化数据和非结构化数据，按照预定的文件格式进行存储生成分布式文件系统，并且分布式存储节点提取结构化数据和非结构化数据当中的关键信息，形成链接到各个视频图像内容信息的关键信息索引，以关键信息索引作为数据项，构建分布式索引数据库；基于各个分布式索引数据库，分布式存储平台提供分布式资源管理框架接口，利用该分布式资源管理框架接口调用各分布式索引数据库。