[发明专利]视频关键帧提取方法

权利要求书

1.一种视频关键帧提取方法，其特征在于包括如下步骤：

提取具有字幕的视频的时空字幕，所述的视频时空字幕提取方法如下：

视频时空字幕是通过对视频进行时空采样得到，对于视频V(x,y,t)，其时空字幕S表示为：

式中：表示视频V中位置x＝j,t＝i,y取字幕高度中值处的像素，满足j∈[1,W],i∈[1,L]，W表示视频帧的宽度，L表示视频的长度；

计算提取的时空字幕视觉能量SSVE，所述视频时空字幕视觉能量的计算方法如下：

视频V(x,y,t)中第i帧的时空字幕视觉能量SSVE由下式计算得到：

式中：

τ用于量度视频时空字幕的像素亮度，亮度值低于τ的像素将被视为干扰而去除掉，表示像素视觉能量；

根据提取的时空字幕视觉能量SSVE，生成SSVE曲线；

所述SSVE曲线的生成方法如下：

视频时空字幕视觉能量曲线可以公式化为：

SSVE＝SSVE(1)∪SSVE(2)∪…SSVE(i)…∪SSVE(L) (4)

SSVE(i)表示第i帧时空字幕视觉能量；

检测SSVE曲线，并根据SSVE曲线提取关键帧，所述关键帧是指视频中字幕出现时刻的视频帧；根据SSVE曲线提取关键帧的方法如下：

不同字幕之间会有时间空隙，新的字幕出现会使SSVE瞬间增大；因此，通过检测SSVE曲线的上升沿便可以得到字幕帧的出现时刻，所述SSVE曲线的上升沿记为RE，RE定义为：

式中：w₀表示新字幕帧与其前一字幕帧的SSVE差异显著程度阈值，SSVE_max为视频字幕帧的SSVE最大值，SSVE(i+1)表示第(i+1)帧的时空字幕视觉能量；

按照公式(5)计算得到RE曲线，曲线峰值对应的视频字幕帧即为所要提取的关键帧。

2.如权利要求1所述的视频关键帧提取方法，其特征在于：

当需要的关键帧数目N已经给定，并且和RE曲线峰值个数M不等时，做如下处理：

(1)如果N＜M，对RE曲线峰值做降序排列，提取前N个曲线峰值对应的视频字幕帧做为视频关键帧；

(2)如果N＞M，采用插值算法得到额外的(N-M)个视频关键帧。