[发明专利]一种提取短视频主题的方法

摘要

一种提取短视频主题的方法，包括：将短视频切分成M张视频截帧图片；采用迁移学习方式，使用卷积神经网络获取视频截帧图片的视频空间特征向量集合；按播放时序，将视频空间特征向量构成特征向量时间序列，并输入双向循环神经网络，从而输出视频空间‑时间特征序列集合H；采用注意力机制，对H中的每个视频空间‑时间特征序列进行调整，从而获得新的视频空间‑时间特征序列集合Q；将Q再展开成一个视频空间‑时间特征向量Z，对Z进行线性变换，然后采用归一化指数函数分别计算短视频归属各个主题的概率，以据此提取短视频的主题。本发明属于信息技术领域，能自动从短视频中提取主题信息，并且有效降低计算量。

主权项

1.一种提取短视频主题的方法，其特征在于，包括有：步骤一、将短视频按照一定间隔的帧长切分成M张视频截帧图片；步骤二、采用迁移学习方式，使用卷积神经网络获取M张视频截帧图片的视频空间特征向量集合Y＝[y₁,y₂,...,y_M]，其中，y₁、y₂、…、y_M分别是每张视频截帧图片通过卷积神经网络所获得的视频空间特征向量；步骤三、按短视频的播放时序，将M张视频截帧图片的视频空间特征向量构成一个特征向量时间序列，将特征向量时间序列输入双向循环神经网络，从而输出一个视频空间‑时间特征序列集合H＝[h₁,h₂,...,h_M]，其中，h₁、h₂、…、h_M分别是输出的视频空间‑时间特征序列集合H中的每个视频空间‑时间特征序列；步骤四、采用注意力机制，计算视频空间‑时间特征序列集合H中每个视频空间‑时间特征序列对其他视频空间‑时间特征序列的注意力，并根据注意力对视频空间‑时间特征序列集合H中的每个视频空间‑时间特征序列进行调整，从而获得新的视频空间‑时间特征序列集合Q＝[q₁,q₂,...,q_M]，其中，q₁、q₂、…、q_M分别是根据注意力而调整后的视频空间‑时间特征序列；步骤五、将新的视频空间‑时间特征序列集合Q再展开成一个视频空间‑时间特征向量Z，对视频空间‑时间特征向量Z进行线性变换，然后采用归一化指数函数分别计算短视频归属各个主题的概率，以据此提取短视频的主题。