[发明专利]跨媒体检索模型的训练方法、跨媒体检索方法及其设备有效
申请号: | 202110797175.X | 申请日: | 2021-07-14 |
公开(公告)号: | CN113254678B | 公开(公告)日: | 2021-10-01 |
发明(设计)人: | 杜军平;姜阳;薛哲;徐欣 | 申请(专利权)人: | 北京邮电大学 |
主分类号: | G06F16/432 | 分类号: | G06F16/432;G06F16/48;G06N3/04 |
代理公司: | 北京金咨知识产权代理有限公司 11612 | 代理人: | 秦景芳 |
地址: | 100876 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种跨媒体检索模型的训练方法、跨媒体检索方法及其设备,其中,该训练方法包括获取跨媒体数据集,每条数据包括图像、文本、时间、作者及语义标签;获取每条数据的语义标签向量及各部分的特征向量;计算标签相似度,得到相似度矩阵;由图像、时间及作者特征向量得到第一模态数据,由文本、时间及作者特征向量得到第二模态数据;将两模态数据分别输入至特征映射网络,得到第一特征映射向量和第二特征映射向量;计算两特征映射向量的相似度,得到相似度矩阵;计算两个相似度矩阵的差异值,将两个特征映射向量输入至模态判别网络,得到对抗损失函数的值,优化网络参数,得到跨媒体检索模型。通过上述方案能准确进行语义关联表达。 | ||
搜索关键词: | 媒体 检索 模型 训练 方法 及其 设备 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京邮电大学,未经北京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110797175.X/,转载请声明来源钻瓜专利网。