[发明专利]动作区域提取方法、装置、设备及计算机可读存储介质

说明书

本发明提供一种动作区域提取方法，涉及图像处理技术领域，该方法包括：获取待修剪视频，对所述待修剪视频进行特征提取，得到第一特征序列；将所述第一特征序列输入至预设时序评估模型，得到时序信息；检测所述时序信息是否符合预设条件，并根据检测结果得到动作区域的时间段信息；根据所述时间段信息从所述待修改视频中提取出对应的动作区域。本发明还提供一种动作区域提取装置、设备及计算机可读存储介质。本发明能够解决现有的动作区域提取方法精确性较差的问题。

技术领域

本发明涉及图像处理技术领域，尤其涉及一种动作区域提取方法、装置、设备及计算机可读存储介质。

背景技术

视频内容分析是当前AI(Artificial Intelligence，人工智能)领域比较热门的研究课题，其中，行动识别作为视频分析的其中一个重要分支，在智能视频监控、人机交互、运动分析、视频检索等诸多领域，具有广阔的应用前景，受到了国内外学者的广泛关注。

在行动识别的过程中，需先对视频进行剪辑，得到多个仅包含一个动作实例的视频剪辑。但是现实场景中录制得到的视频通常很长、并且包含很多与动作实例无关的内容。此时，通常会通过时序检测的手段来检测未修剪视频中的动作实例。具体的，时序检测任务可以分为两个阶段：动作区域的提取和分类。其中，动作区域的提取阶段旨在提取出包含动作实例的视频区域，分类阶段则是对动作区域进行分类。因此，获取高质量的动作区域，是保证动作实例检测结果准确性的关键。

目前，通常是使用多个持续时间的滑动时间窗口以固定的间隔进行滑动，以提取动作区域，但是，使用预定义的持续时间和间隔提取的动作区域具有以下缺陷：1)时间通常不精确；2)真实场景下动作实例的持续时间是复杂多变的，不能够灵活覆盖，尤其是在时间范围很大的情况下。因此，现有的动作区域提取方法精确性较差的问题。

发明内容

本发明的主要目的在于提供一种动作区域提取方法、装置、设备及计算机可读存储介质，旨在解决现有的动作区域提取方法精确性较差的问题。

为实现上述目的，本发明提供一种动作区域提取方法，所述动作区域提取方法包括：

获取待修剪视频，对所述待修剪视频进行特征提取，得到第一特征序列；

将所述第一特征序列输入至预设时序评估模型，得到时序信息；

检测所述时序信息是否符合预设条件，并根据检测结果得到动作区域的时间段信息；

根据所述时间段信息从所述待修改视频中提取出对应的动作区域。

可选地，所述获取待修剪视频，对所述待修剪视频进行特征提取，得到第一特征序列的步骤包括：

获取待修剪视频，对所述待修剪视频进行分帧处理，得到视频图像序列；

在所述视频图像序列中每隔预设帧数获取目标视频图像，提取所述目标视频图像的红绿蓝RGB特征和光流特征，得到RGB特征序列和光流特征序列；

对所述RGB特征序列和所述光流特征序列进行拼接，得到第一特征序列。

可选地，所述时序信息包括各目标视频图像对应的动作片段开始概率和动作片段结束概率，所述检测所述时序信息是否符合预设条件，并根据检测结果得到动作区域的时间段信息的步骤包括：

检测所述动作片段开始概率中是否存在大于第一预设阈值的概率值，得到第一检测结果，并根据所述第一检测结果得到动作片段开始时间数组；

检测所述动作片段结束概率中是否存在大于第二预设阈值的概率值，得到第二检测结果，并根据所述第二检测结果得到动作片段结束时间数组；

根据所述动作片段开始时间数组、所述动作片段结束时间数组，组合得到动作区域的时间段信息。