[发明专利]一种基于语义一致性的半监督短视频分类方法

摘要

本发明公开了一种基于语义一致性的半监督短视频分类方法，包括：利用视频邻近帧相关性，将有标签数据和无标签数据分别以t0，t0+τ帧为起点按等时间间隔T抽取关键帧得到两个帧序列，并分别做强数据增强、标准数据增强；搭建由空间特征学习模块、时间注意力融合模块、分类器模块组成的神经网络；标准数据增强后的有标签样本和无标签样本取相同数量拼接后输入神经网络并计算有标签部分的分类损失；将强数据增强后的有标签样本和无标签样本取相同数量拼接后输入神经网络，得到预测输出，对同一样本这两种不同数据增强处理后输入网络得到的预测分布计算一致性损失；将分类损失和一致性损失联合用于神经网络的优化训练；将视频样本输入优化后的神经网络输出相应预测分数，得到最终视频分类结果。