[发明专利]一种应用于变电监控视频中的视频摘要生成方法

摘要

生成方法申请(专利)号CN201710827505.9

主权项

一种应用于变电监控视频中的视频摘要生成方法，其特征在于包括以下步骤：步骤1：对监控视频的图像进行预处理：读入视频帧后，采取基于降采样和高斯模糊对读入的视频帧进行降噪预处理；步骤2：基于视频抖动处理的目标检测，得到运动目标轮廓信息；步骤3：利用步骤2得到的运动目标轮廓信息提取运动目标的HOG特征，此外还提取HOG描述子、SIFT特征关键点、SIFT描述子、质心位置；步骤4：根据步骤3提取到的运动目标的HOG描述子判断步骤2检测得到的运动目标是否为巡检工作人员，根据判断结果巡检工作人员标志；步骤5：跟踪算法在混合高斯背景建模中背景差分算法趋于稳定后开始创建各个前景物体的数据块，为每个运动目标分配标签，用一个数据结构保存各物体的标签、HOG描述子、SIFT特征关键点、SIFT描述子、质心位置、轮廓信息、物体图像、包围框、巡检工作人员标志，在进行跟踪算法时，当前帧中的运动目标在提取目标特征后会与跟踪目标进行匹配，若匹配成功则给对应运动目标分配与其匹配的跟踪目标相同的标签，以此来表示他们是同一目标，若匹配失败则会生成新的标签，将该运动目标作为新的跟踪目标，标签的运用主要是为表征目标出现的时序信息；步骤6：以标签为索引的运动目标运动轨迹的生成：当每一帧跟踪算法结束时，对运动轨迹结构体进行维护和更新，运动轨迹结构体包含标签、开始帧、结束帧、运动过程中的所有运动目标图像和位置信息，运动轨迹结构体用标签作为索引，一个标签对应一段运动轨迹；步骤7：对步骤6生成的运动轨迹进行过滤，将最长运动轨迹的长度确定为最终运动目标视频摘要的长度；步骤8：使用模拟退火算法把步骤7中筛选后的运动轨迹进行时空上的优化组合，得到优化后的运动轨迹结构体S；步骤9：生成摘要视频：首先读入背景模型维护的背景图像，根据输出视频的容器类型决定视频编码方式，然后对于由步骤7决定的摘要视频长度的每一帧创建一幅图像，先贴入背景图像，接着遍历由步骤7中处理完每一帧进行数据更新时维护的运动轨迹结构体S，由运动轨迹结构体S的begin_frame成员和模拟退火算法得到的开始帧计算是否要在当前帧中贴入该运动轨迹的图像，合成完图像后将图像追加到输出视频中。