[发明专利]基于特征提取模型的处理方法、装置、电子设备及介质在审
申请号: | 202111193177.4 | 申请日: | 2021-10-13 |
公开(公告)号: | CN113869272A | 公开(公告)日: | 2021-12-31 |
发明(设计)人: | 王珣;柯冰清;李宣平 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06F16/783 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 宁立存 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 特征 提取 模型 处理 方法 装置 电子设备 介质 | ||
1.一种基于特征提取模型的处理方法,其特征在于,所述方法包括:
获取样本检索信息的检索特征、与所述样本检索信息关联的第一视频信息及与所述样本检索信息不关联的第二视频信息,所述第一视频信息包括第一文本信息及第一视频资源,所述第一文本信息用于描述所述第一视频资源,所述第二视频信息包括第二视频资源;
基于特征提取模型,获取所述第一视频信息中所述第一文本信息的第一文本特征及所述第一视频资源的第一资源特征,将所述第一文本特征与所述第一资源特征进行融合,得到第一视频特征;
基于所述特征提取模型,获取所述第二视频信息中所述第二视频资源的第二资源特征,将所述第一文本特征与所述第二资源特征进行融合,得到第二视频特征;
基于所述第一视频特征和所述第二视频特征分别与所述检索特征之间的匹配关系,对所述特征提取模型进行训练,所述特征提取模型用于获取任一视频信息的特征。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一视频特征和所述第二视频特征分别与所述检索特征之间的匹配关系,对所述特征提取模型进行训练,包括:
确定所述检索特征与所述第一视频特征之间的第一相似度,以及所述检索特征与所述第二视频特征之间的第二相似度;
基于所述第一相似度及所述第二相似度,对所述特征提取模型进行训练。
3.根据权利要求1所述的方法,其特征在于,所述第二视频信息还包括第二文本信息,所述第二文本信息用于描述所述第二视频资源,所述基于所述特征提取模型,获取所述第二视频信息中所述第二视频资源的第二资源特征,将所述第一文本特征与所述第二资源特征进行融合,得到第二视频特征,包括:
基于所述特征提取模型,获取所述第二视频信息中所述第二文本信息的第二文本特征及所述第二视频资源的第二资源特征,将所述第二文本特征与所述第二资源特征进行融合,得到所述第二视频信息的第三视频特征,将所述第一文本特征与所述第二资源特征进行融合,得到第二视频特征;
所述基于所述第一视频特征和所述第二视频特征分别与所述检索特征之间的匹配关系,对所述特征提取模型进行训练,包括:
基于所述第一视频特征、所述第二视频特征和所述第三视频特征分别与所述检索特征之间的匹配关系,对所述特征提取模型进行训练。
4.根据权利要求3所述的方法,其特征在于,所述基于所述第一视频特征、所述第二视频特征和所述第三视频特征分别与所述检索特征之间的匹配关系,对所述特征提取模型进行训练,包括:
确定所述检索特征与所述第一视频特征之间的第一相似度、所述检索特征与所述第二视频特征之间的第二相似度以及所述检索特征与所述第三视频特征之间的第三相似度;
基于所述第一相似度、所述第二相似度及所述第三相似度,对所述特征提取模型进行训练。
5.一种基于特征提取模型的处理方法,其特征在于,所述方法包括:
获取任一检索信息的检索特征及多个视频信息,每个所述视频信息包括文本信息及视频资源;
对于每个所述视频信息,基于特征提取模型,获取所述视频信息中文本信息的文本特征及视频资源的资源特征,将所述文本特征与所述资源特征进行融合,得到所述视频信息的视频特征;
基于所述检索特征及每个所述视频信息的视频特征之间的相似度,将所述相似度最大的至少一个视频信息,确定为与所述检索信息关联的视频信息;
其中,所述特征提取模型是基于第一视频特征和第二视频特征分别与样本检索信息的检索特征之间的匹配关系训练得到的,所述第一视频特征对应的第一视频信息与所述样本检索信息关联,且包括第一文本信息及第一视频资源,所述第二视频特征对应的视频信息包括的文本信息与所述样本检索信息关联,但包括的视频资源与所述样本检索信息不关联。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111193177.4/1.html,转载请声明来源钻瓜专利网。