[发明专利]视频精彩片段的检测方法、装置、计算机设备和存储介质

权利要求书

1.一种视频精彩片段的检测方法，其特征在于，所述方法包括：

获取待检测视频数据，根据预设采样率对所述待检测视频数据进行采样，得到多个采样时刻对应的视频段；

对每个采样时刻对应的视频段中的图像进行光流计算，得到每个采样时刻的光流；

将每个采样时刻对应的视频段中的图像以及光流输入至综合特征提取模型中，得到每个采样时刻的综合特征；

根据每个采样时刻对应的多个连续采样时刻的综合特征计算每个采样时刻的时空特征；

根据所述时空特征计算相应采样时刻对应的精彩分数；

根据所述精彩分数确定所述待检测视频数据中的视频精彩片段。

2.根据权利要求1所述的方法，其特征在于，所述综合特征提取模型包括图像特征提取子网络、光流特征提取子网络和特征融合子网络，所述将每个采样时刻对应的视频段中的图像以及光流输入至综合特征提取模型中，得到每个采样时刻的综合特征包括：

将每个采样时刻对应的视频段中的图像以及光流输入至综合特征提取模型中，通过所述综合特征提取模型中的图像特征提取子网络和光流特征提取子网络分别提取所述图像对应的图像特征以及所述光流对应的光流特征；

通过所述综合特征提取模型中的特征融合子网络将每个采样时刻对应的光流特征与图像特征进行融合，得到每个采样时刻的综合特征。

3.根据权利要求1所述的方法，其特征在于，所述根据每个采样时刻对应的多个连续采样时刻的综合特征计算每个采样时刻的时空特征包括：

根据多个连续采样时刻确定每个采样时刻对应的多个连续采样时刻的综合特征；

将每个采样时刻对应的多个连续采样时刻的综合特征进行融合，得到每个采样时刻的时空特征。

4.根据权利要求1所述的方法，其特征在于，所述根据所述时空特征计算相应采样时刻的精彩分数包括：

调用预先训练的打分模型，将所述时空特征输入至所述打分模型中，输出相应采样时刻的精彩分数。

5.根据权利要求1所述的方法，其特征在于，所述根据所述精彩分数确定所述待检测视频数据中的视频精彩片段包括：

将所述精彩分数转换为相应的精彩置信度；

根据所述精彩置信度确定精彩采样时刻；

根据所述精彩置信度以及所述精彩采样时刻确定所述待检测视频数据中的视频精彩片段。

6.根据权利要求5所述的方法，其特征在于，所述根据所述精彩置信度以及所述精彩采样时刻确定所述待检测视频数据中的视频精彩片段包括：

根据所述精彩置信度确定所述精彩采样时刻所属的初始精彩片段的开始时刻和结束时刻，根据确定的开始时刻和结束时刻确定相应的初始精彩片段；

当存在多个初始精彩片段时，将两两初始精彩片段的开始时刻和结束时刻分别进行比较，识别待拼接片段；

将所述待拼接片段进行拼接，得到所述待检测视频数据中的视频精彩片段。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

调用预先训练的分类模型，将所述时空特征输入至所述分类模型中，输出相应采样时刻的场景类别。

8.一种视频精彩片段的检测装置，其特征在于，所述装置包括：

图像获取模块，用于获取待检测视频数据，根据预设采样率对所述待检测视频数据进行采样，得到多个采样时刻对应的多个视频段；

光流计算模块，用于对每个采样时刻对应的视频段中的图像进行光流计算，得到每个采样时刻的光流；

综合特征提取模块，用于将每个采样时刻对应的视频段中的图像以及光流输入至综合特征提取模型中，得到每个采样时刻的综合特征；

时空特征计算模块，用于根据每个采样时刻对应的多个连续采样时刻的综合特征计算每个采样时刻的时空特征；

精彩分数计算模块，用于根据所述时空特征计算每个采样时刻的精彩分数；

精彩片段确定模块，用于根据所述精彩分数确定所述待检测视频数据中的视频精彩片段。