[发明专利]用于活动顺序验证的基于视觉的监视系统

权利要求书

1.一种用于监视工作空间区域的人监视系统，所述系统包括：

围绕所述工作空间区域布置的多个摄像头，每个摄像头配置成捕获包括多个图像帧的视频馈送；

视觉处理器，配置为：

从所述多个图像帧识别工作空间区域内的人的存在；

生成所述工作空间区域内的人的运动轨迹，所述运动轨迹图示在一段时间内的人的位置；

生成整个运动轨迹中人执行的一个或多个活动的活动记录；

将所述运动轨迹和活动记录转换成语义描述，将该语义描述与限定多个需要动作的活动模板进行比较，以产生匹配分数；和

基于该匹配分数，确定所执行的活动的顺序与期望的工作任务是否相似，如果不相似，则提供警告；

其中，所述视觉处理器被配置成通过提取检测到的人的图示的特征，并且将该特征传到对应的预先训练的分类器组，以产生时间动作标记、空间动作标记、动作相似度分数、姿势估计，将该时间动作标记、空间动作标记、动作相似度分数、姿势估计放入时间-空间标记图，该时间-空间标记图形成语义描述的构成框。

2.如权利要求1所述的系统，其中，所述视觉处理器被配置为利用所述时间-空间标记图将活动顺序分解为构成基元动作，并产生AND-OR图，所产生的AND-OR图与规定的活动显示比较，以产生匹配分数。

3.如权利要求1所述的系统，其中，从所述多个图像帧识别工作空间区域内的人的存在包括使用支持向量机和神经网络中的至少一个。

4.如权利要求1所述的系统，其中，从所述多个图像帧识别工作空间区域内的人的存在可还包括检测人的姿势，其中所述姿势包括直立、步行、伸手和蹲下中的至少一个。

5.如权利要求1所述的系统，其中，所述警告指示观察到的动作不是典型的，而是异常的。

6.如权利要求1所述的系统，其中，所述视觉处理器被配置为通过以下步骤识别所述工作空间区域内人的存在：

其中所述视觉处理器还配置为将来自多个视图的时间同步图像帧融合至共同的坐标系中；并且

其中视觉处理器配置为通过将人的图示从所述多个视图映射到共同的坐标系以及通过确定映射的图示的相交点来识别检测到的人在共同坐标系中的位置。

7.如权利要求1所述的系统，其中，存档语义描述和视频简介以用于以后的参考。