[发明专利]视频场景的分割方法、装置、计算机设备、存储介质

说明书

本申请涉及一种视频场景的分割方法、装置、计算机设备、存储介质和计算机程序产品。计算机设备可以包括智能手机、电脑或智能车载设备；包括：通过双路模型对视频镜头序列进行特征提取，得到镜头特征；在镜头特征中确定正样本特征；获取负样本特征，基于负样本特征和正样本特征之间的损失值对第一编码器和第二编码器进行优化；其中，优化后的第一编码器作为镜头特征提取模型；通过镜头特征提取模型从目标视频镜头序列提取第三镜头特征，并基于第三镜头特征对场景分割模型进行训练；基于训练后的场景分割模型对待分割视频进行视频场景分割。采用本方法能够有效提高视频场景分割的准确性。

技术领域

本申请涉及计算机技术领域，特别是涉及一种视频场景的分割方法、装置、计算机设备、存储介质和计算机程序产品。

背景技术

随着计算机技术以及互联网技术的发展，视频场景分割是视频理解中的一项重要技术，其主要是以一个长段视频按照场景内容的不同为切分线索，并以镜头维度将长视频切分成若干独立子视频的一项技术，对于该技术而言，提取到良好的镜头特征和选择合适的镜头分割模型是至关重要的。

然而，目前视频场景的分割方式中，主要是采用将某个镜头边界两边的若干个数的相邻镜头特征进行聚合，得到镜头边界的特征，再进一步对该镜头边界的特征进行分类，来决策该边界是否为场景边界，这样带来的问题是每个镜头边界聚合的镜头特征个数是不确定的，且每个场景拥有的镜头数量也是不固定的，因此会引入较强的归纳偏置，容易导致视频场景分割模型的泛化能力不佳，使得视频场景分割的准确性较差。

发明内容

基于此，有必要针对上述技术问题，提供一种能够有效提高视频场景分割的准确性的视频场景的分割方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。

第一方面，本申请提供了一种视频场景的分割方法。所述方法包括：通过双路模型的第一编码器和第二编码器分别对视频镜头序列进行特征提取，得到第一镜头特征和第二镜头特征；在所述第一镜头特征中确定第一样本特征，并基于所述第一样本特征的编码在所述第二镜头特征中确定第二样本特征；所述第一样本特征和所述第二样本特征作为正样本特征；获取负样本特征，基于所述负样本特征和所述正样本特征之间的损失值对所述第一编码器和所述第二编码器进行优化；其中，优化后的第一编码器作为镜头特征提取模型；通过所述镜头特征提取模型从目标视频镜头序列提取第三镜头特征，并基于所述第三镜头特征对场景分割模型进行训练；基于训练后的场景分割模型对待分割视频进行视频场景分割。

第二方面，本申请还提供了一种视频场景的分割装置。所述装置包括：提取模块，用于通过双路模型的第一编码器和第二编码器分别对视频镜头序列进行特征提取，得到第一镜头特征和第二镜头特征；确定模块，用于在所述第一镜头特征中确定第一样本特征，并基于所述第一样本特征的编码在所述第二镜头特征中确定第二样本特征；所述第一样本特征和所述第二样本特征作为正样本特征；优化模块，用于获取负样本特征，基于所述负样本特征和所述正样本特征之间的损失值对所述第一编码器和所述第二编码器进行优化；其中，优化后的第一编码器作为镜头特征提取模型；训练模块，用于通过所述镜头特征提取模型从目标视频镜头序列提取第三镜头特征，并基于所述第三镜头特征对场景分割模型进行训练；分割模块，用于基于训练后的场景分割模型对待分割视频进行视频场景分割。

第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：通过双路模型的第一编码器和第二编码器分别对视频镜头序列进行特征提取，得到第一镜头特征和第二镜头特征；在所述第一镜头特征中确定第一样本特征，并基于所述第一样本特征的编码在所述第二镜头特征中确定第二样本特征；所述第一样本特征和所述第二样本特征作为正样本特征；获取负样本特征，基于所述负样本特征和所述正样本特征之间的损失值对所述第一编码器和所述第二编码器进行优化；其中，优化后的第一编码器作为镜头特征提取模型；通过所述镜头特征提取模型从目标视频镜头序列提取第三镜头特征，并基于所述第三镜头特征对场景分割模型进行训练；基于训练后的场景分割模型对待分割视频进行视频场景分割。