[发明专利]基于一致性片段生成的无监督视频摘要方法

摘要

本发明公开了一种基于一致性片段生成的无监督视频摘要方法，包括以下步骤：原始视频的初始分割；一致性片段合并；通过爬山算法分两步分别优化静态一致性函数和动作一致性函数，迭代地调整每个片段的边界；利用多个图像兴趣度特征，计算每一帧的兴趣度分数，根据每个片段内所有帧的兴趣度分数估计该片段的重要性分数；将所有片段按重要性排序，选择重要性高且总时长接近指定长度的片段，按时间顺序连接，得到最终视频摘要。本发明生成的视频摘要与人类做出的最好视频摘要非常接近。

主权项

1.一种基于一致性片段生成的无监督视频摘要方法，其特征在于，包括以下步骤：步骤1，以预设的长度将原始视频均匀地分割为多个相同长度的片段；步骤2，计算每个片段和相邻的下一个片段之间的片段静态相似度分数和片段动作相似度分数，并确定对应的两个自适应阈值，判断每个片段是否满足合并条件，对于满足合并条件的片段，合并其与相邻的下一个片段，重复这个过程直到没有满足合并条件的片段；所述合并条件为片段的两个相似度分数同时超过各自阈值；步骤3，用爬山算法分别优化静态一致性函数和动作一致性函数，调整所有片段的边界；步骤4，计算每个片段内所有帧的兴趣度分数，以此估计每个片段的重要性，基于重要性和时长要求，得到最终的视频摘要结果。