[发明专利]视频场景分割方法、装置、设备及计算机可读存储介质

说明书

本申请提供了一种视频场景分割方法、装置、设备及计算机可读存储介质；涉及人工智能技术，方法包括：对待处理视频进行抽帧，得到视频帧集合；并对视频帧集合中的每个视频帧进行特征提取，得到每个视频帧对应的特征向量；基于特征向量，构造帧间相似度矩阵；帧间相似度矩阵表征视频帧之间的相似程度；基于帧间相似度矩阵进行场景变化预测，从视频帧集合中确定出场景分割帧；基于场景分割帧对待处理视频进行场景分割，得到场景分割结果。通过本申请，能够提高视频场景分割的准确性。

技术领域

本申请涉及人工智能技术，尤其涉及一种视频场景分割方法、装置、设备及计算机可读存储介质。

背景技术

目前，关于视频场景的分割方法，相关技术通常是先通过视频分段算法对视频分段；再根据特征相似对视频分段进行聚类，将同一聚类下的视频片段作为一个视频场景利用神经网络提取视频分段的特征，并对视频片段的特征进行学习，依赖于同一场景中视频片段更加相似的假设，对视频片段的特征进行聚类，将同一场景下的片段聚集在一起，作为一个视频场景，从而实现对视频的场景分割。可以看出，相关技术的方法通常需要引入专门的算法模型来得到视频片段，从而造成了额外的处理成本，降低了场景分割的效率；并且，场景分割的准确度容易受到视频片段本身的视频质量的影响，从而降低了视频场景分割的准确性。

发明内容

本申请实施例提供一种视频场景分割方法、装置、设备及计算机可读存储介质，能够提高视频场景分割的准确性。

本申请实施例的技术方案是这样实现的：

本申请实施例提供一种视频场景分割方法，包括：

对待处理视频进行抽帧，得到视频帧集合；并对所述视频帧集合中的每个视频帧进行特征提取，得到所述每个视频帧对应的特征向量；

基于所述特征向量，构造帧间相似度矩阵；所述帧间相似度矩阵表征视频帧之间的相似程度；

基于所述帧间相似度矩阵进行场景变化预测，从所述视频帧集合中确定出场景分割帧；

基于所述场景分割帧对所述待处理视频进行场景分割，得到场景分割结果。

本申请实施例提供一种视频场景分割装置，包括：

提取模块，用于对待处理视频进行抽帧，得到视频帧集合；并对所述视频帧集合中的每个视频帧进行特征提取，得到所述每个视频帧对应的特征向量；

计算模块，用于基于所述特征向量，构造帧间相似度矩阵；所述帧间相似度矩阵表征视频帧之间的相似程度；

预测模块，用于基于所述帧间相似度矩阵进行场景变化预测，从所述视频帧集合中确定出场景分割帧；

分割模块，用于基于所述场景分割帧对所述待处理视频进行场景分割，得到场景分割结果。

上述装置中，所述提取模块，还用于对所述每个视频帧进行至少一种方式的特征提取，得到所述每个视频帧对应的至少一个单特征；对所述至少一个单特征进行特征融合，得到所述每个视频帧对应的特征向量。

上述装置中，所述提取模块，还用于将至少一个单特征映射到统一的特征维度，得到至少一个映射单特征；对至少一个映射单特征进行特征拼接与平均池化处理，得到平均特征；根据所述平均特征，基于注意力机制计算所述至少一个映射单特征中每个映射单特征对应的融合权重；根据所述每个映射单特征对应的融合权重，对所述至少一个映射单特征进行加权与拼接，得到所述特征向量。

上述装置中，所述计算模块，还用于分别计算所述每个视频帧与所述视频帧集合中全部视频帧的特征向量之间的距离，得到所述每个视频帧对应的至少一个特征距离；根据所述每个视频帧对应的至少一个特征距离，构造得到特征距离矩阵；对所述特征距离矩阵进行归一化处理，得到所述帧间相似度矩阵。