[发明专利]基于深度学习训练重构图的视频识别方法及系统

说明书

本发明公开了一种基于深度学习训练重构图的视频识别方法及系统。其中，该视频识别方法包括：对待识别的视频片段进行取样；利用CNN训练得到的不同行为的识别库对取样的视频片段进行识别，得到不同行为出现的概率；以及预先对各个行为划分类别，根据不同行为出现的概率，统计的出现概率最高的类别作为视频的内容。该方法受环境影响较小，不需要对多种环境特征进行采集，适合推广至多个领域；可采用半定制的设计流程来实现视频识别，降低因全盘设计带来的成本和风险，而且减少产品的开发周期。

技术领域

本公开属于人工智能领域，涉及一种基于深度学习训练重构图的视频识别方法及系统。

背景技术

视频内容识别，成为了当前研究的热点之一，日益引起人们的重视。视频识别技术在国内外的研究都十分流行。国外对于常见识别方案如动作识别(activity recognition)有了深入的研究。随着人工智能算法设计和实现的不断进步，深度学习在工业生产以及人们生活中所扮演的角色越来越重，其应用领域也变得越来越多，其对识别领域的贡献率也越来越高。

视频识别技术，常与图像分析结合，是一种有效的视频内容识别方案。具体的工作原理是将视频切割成帧(即分割)，再通过图像分析方法提取特征，进而进行判别。然而对于可变多样的环境，通过图像分析方法提取特征的方法收效甚微。

国内对于视频识别技术的研究主要集中于灾难预警以及人员状态识别。有的研究提出利用图像识别算法通过对视频中地理，人员数量等信息的识别来判断潜在的城市应急事件。有的研究提出从视频样本中提取帧图像，在caffe的框架下训练神经网络使之能够识别恐怖事件。有的研究提出使用图像序列，边缘图像序列以及光流图像训练卷积神经网络进行视频内容识别。

然而，现有的识别方案中，识别的内容比较局限，在现实中只能应用于特定的领域，无法推广至多个领域，也无法综合多个特征进而识别视频的内容，从而导致了识别精度的不足。另外，现有的识别方案对环境的要求比较高，即当环境出现变化时，识别的精度会在一定程度上大打折扣，同时，在采集多种环境参数时，也增加了产品的开发周期和成本。因此，亟需提出一种能够识别多个领域的内容、并且受环境影响较小的视频识别方法。

发明内容

(一)要解决的技术问题

本公开提供了一种基于深度学习训练重构图的视频识别方法及系统，以至少部分解决以上所提出的技术问题。

(二)技术方案

根据本公开的一个方面，提供了一种基于深度学习训练重构图的视频识别方法，包括：对待识别的视频片段进行取样；利用CNN训练得到的不同行为的识别库对取样的视频片段进行识别，得到不同行为出现的概率；以及预先对各个行为划分类别，根据不同行为出现的概率，统计的出现概率最高的类别作为视频的内容。

在本公开的一些实施例中，CNN训练得到不同行为的识别库的方法，包括：对待训练的视频片段进行取样；对取样的视频片段进行帧处理，得到黑白的连续帧图像；利用连续帧图像构建涵盖取样的视频片段信息的原始数据重构图和二维运动场序列重构图；将原始数据重构图和二维运动场序列重构图作为输入数据进行CNN训练；以及选用大量样本重复进行CNN训练，直至对所训练行为的识别误差率符合要求，形成单动作行为识别系统；针对不同动作行为实施CNN训练，得到包含多个单动作行为的识别库。

在本公开的一些实施例中，利用连续帧图像构建涵盖取样的视频片段信息的原始数据重构图，包括：先将一帧中的每个像素点与周围四点计算梯度并取平均值，边缘点忽略，将所有计算完毕的点作成一横向序列；重复处理该取样的视频片段里面的所有连续帧图像，将得到的所有横向序列按纵向排列作成矩阵，便得到涵盖取样的视频片段信息的原始数据重构图。