[发明专利]视频表征方法及装置在审
申请号: | 202210293495.6 | 申请日: | 2022-03-23 |
公开(公告)号: | CN114863202A | 公开(公告)日: | 2022-08-05 |
发明(设计)人: | 苏冰;张恒;李昱;祁仲昂;单瀛 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06V10/774 | 分类号: | G06V10/774;G06V10/70;G06V20/00;G06K9/62;G06N20/00 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 贾允 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 表征 方法 装置 | ||
本申请公开了一种视频表征方法及装置,属于计算机技术领域。所述方法包括:获取待处理视频片段;将待处理视频片段输入目标视频表征模型,得到待处理视频片段对应的第一视频表征数据。本申请实施例提供的技术方案中,通过训练样本中的视频片段对应的视频表征数据,可以确定视频片段之间的相似度信息,并在相似度信息的基础上引入视频片段之间的时序距离信息来确定距离衰减损失信息,以此在模型训练过程中调整时序距离信息与相似度信息之间的负相关程度,使得视频表征模型学习到不同视频片段在时间维度上的距离与其相似度之间的相关性,输出更加准确的视频表征数据对待处理视频进行特征表示,有效提升视频表征的准确性。
技术领域
本申请涉及计算机技术领域,特别涉及一种视频表征方法及装置。
背景技术
随着数字技术及互联网技术的发展,视频形式的信息内容服务受到大众喜爱,互联网中的视频量激增。因此,视频表征学习变得更加重要。
相关技术中,通过大量的标注类别数据训练视频表征模型进行视频表征学习,使得标注类别数据相同或相近的视频,其对应的视频表征数据之间的特征距离也是相近的。上述视频表征模型完成训练后可输出视频表征数据,以对输入视频进行特征表示,并应用于下游视频分类任务中。
然而,相关技术中的视频表征学习依赖标注类别数据,视频表征也仅与标注类别数据相关,视频表征的准确性较低。
发明内容
本申请实施例提供了一种视频表征方法及装置,能够提升视频表征的准确性。
根据本申请实施例的一个方面,提供了一种视频表征方法,所述方法包括:
获取待处理视频片段;
将所述待处理视频片段输入目标视频表征模型,得到所述待处理视频片段对应的第一视频表征数据;
其中,所述目标视频表征模型是基于训练样本以及距离衰减损失信息进行训练得到的机器学习模型,所述距离衰减损失信息基于所述训练样本中的视频片段之间对应的时序距离信息和相似度信息确定,所述相似度信息基于所述视频片段对应的视频表征数据确定,所述距离衰减损失信息用于调整所述时序距离信息与所述相似度信息之间的负相关程度。
根据本申请实施例的一个方面,提供了一种视频表征装置,所述装置包括:
视频获取模块,用于获取待处理视频片段;
视频表征模块,用于将所述待处理视频片段输入目标视频表征模型,得到所述待处理视频片段对应的第一视频表征数据;
其中,所述目标视频表征模型是基于训练样本以及距离衰减损失信息进行训练得到的机器学习模型,所述距离衰减损失信息基于所述训练样本中的视频片段之间对应的时序距离信息和相似度信息确定,所述相似度信息基于所述视频片段对应的视频表征数据确定,所述距离衰减损失信息用于调整所述时序距离信息与所述相似度信息之间的负相关程度。
根据本申请实施例的一个方面,提供了一种计算机设备,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述视频表征方法。
根据本申请实施例的一个方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述视频表征方法。
根据本申请实施例的一个方面,提供了一种计算机程序产品,所述计算机程序产品包括计算机指令,所述计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取所述计算机指令,所述处理器执行所述计算机指令,使得所述计算机设备执行以实现上述视频表征方法。
本申请实施例提供的技术方案可以带来如下有益效果:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210293495.6/2.html,转载请声明来源钻瓜专利网。