[发明专利]一种基于视觉的建筑视频高光自动检测方法、设备和存储介质

说明书

本发明公开了一种基于视觉的建筑视频高光自动检测方法，设备和存储介质，涉及图像处理领域。其中的方法包括：对输入视频进行机器跟踪，产生跟踪结果；根据预设规则分析跟踪结果，提取出目标关键帧；采用卷积神经网络对输入视频进行特征提取，提取出视频所有帧数中的高级特征帧；采用相似性评估手段评估高级特征帧，提取出特征关键帧；对目标关键帧和特征关键帧进行组合，去除重复的关键帧，并生成视频高光。本发明实现了有效视频片段的系统性、简洁性的获取；实现了对施工视频片段的有效索引，同时大幅度降低了存储空间的占用，提高了建筑工地的安全生产管理效率。

技术领域

本发明涉及图像处理领域，尤其是一种基于视觉的建筑视频高光自动检测方法。

背景技术

在城市建设和发展的进程中，建筑工地的生产管理也在逐步进行现代化更新。相比于传统的人力监控，对施工过程进行录像分析就是一种现代化的安全生产管理手段。由于施工过程的持续时间通常很长，因此对工程师而言进行录像分析耗时耗力，难以甄别其中所包含的重要信息、且录像所占用的存储空间也较大。

发明内容

有鉴于此，本发明提供一种基于视觉的建筑视频高光自动检测方法、设备和存储介质。

本发明的第一方面提供了一种基于视觉的建筑视频高光自动检测方法，其特征在于，包括以下步骤：

对输入视频进行机器跟踪，产生跟踪结果，所述跟踪结果包括机器类别、机器标识和机器轨迹；

根据预设规则分析跟踪结果，提取出目标关键帧；

采用卷积神经网络对输入视频进行特征提取，提取出视频所有帧中的高级特征帧；

采用相似性评估手段评估高级特征帧，提取出特征关键帧；

对所述目标关键帧和特征关键帧进行组合，并生成视频高光。

进一步地，所述对输入视频进行机器跟踪，产生跟踪结果，具体包括：

采用CMT算法实时检测机器的特征点，与机器在上一时刻的特征点进行匹配；

将特征点的运动轨迹作为跟踪结果输出。

进一步地，所述预设规则包括工作区规则、工作状态规则和工作交互规则。

进一步地，所述工作区规则，具体包括对机器进入或离开工作区进行检测的规则。

进一步地，所述工作状态规则，具体包括对机器工作状态变化进行识别的规则。

进一步地，所述工作交互规则，具体包括对多台机器之间的交互进行检测的规则。

进一步地，所述对目标关键帧和特征关键帧进行组合之后，还包括：去除目标关键帧和特征关键帧中重复的关键帧，去除起止间隔小于五帧的目标关键帧和起止间隔小于五帧的特征关键帧。

进一步地，所述生成视频高光，包括：将目标关键帧与特征关键帧采用不同高光方式进行标记。

本发明还公开了一种设备，包括处理器以及存储器；

所述存储器用于存储程序；

所述处理器执行所述程序实现所述的一种基于视觉的建筑视频高光自动检测方法。

本发明还公开了一种计算机可读存储介质，所述存储介质存储有程序，所述程序被处理器执行实现所述的一种基于视觉的建筑视频高光自动检测方法。

本发明的有益效果为：通过对施工视频进行特征提取，实现了有效视频片段的系统性、简洁性的获取；将关键帧进行高亮处理，实现了对施工视频片段的有效索引，同时大幅度降低了存储空间的占用，提高了建筑工地的安全生产管理效率。

附图说明