[发明专利]一种基于稀疏自编码器的多视频摘要方法

摘要

一种基于稀疏自编码器的多视频摘要方法，包括：提取视频帧的视觉特征；将视频帧的视觉特征输入到稀疏自编码器，通过稀疏自编码器分别学习得到：视频帧的压缩表示即隐层的神经元的表征，输入层和隐层之间的连接权重，以及隐层和输出层的连接权重；利用获得的输入层和隐层之间的连接权重生成权重曲线；选择权重曲线的各局部最大值作为关键帧集合；对关键帧进行排序，实现摘要。本发明针对现有的多视频摘要数据集的特点，设计适用于该特点的基于带权重的原型分析方法的多视频摘要技术，使之在有效的先验信息的辅助下，充分地利用数据的特有信息。

主权项

一种基于稀疏自编码器的多视频摘要方法，其特征在于，包括如下步骤：1)提取视频帧的视觉特征，将视频帧的视觉特征表示为X＝{x1,x2,...,xi,...,xn},xi∈Rm；xi表示第i帧的视觉特征；2)将视频帧的视觉特征输入到稀疏自编码器，通过稀疏自编码器分别学习得到：视频帧的压缩表示即隐层的神经元的表征，输入层和隐层之间的连接权重W(1)，以及隐层和输出层的连接权重W(2)；3)利用获得的输入层和隐层之间的连接权重W(1)生成权重曲线，即所述权重W(1)的第j列取2范数，用公式表示为4)选择权重曲线的各局部最大值作为关键帧集合；5)对关键帧进行排序，实现摘要。