[发明专利]一种基于GCN的深度无监督跨模态检索方法在审
申请号: | 202211389979.7 | 申请日: | 2022-11-08 |
公开(公告)号: | CN115599942A | 公开(公告)日: | 2023-01-13 |
发明(设计)人: | 李明勇;戈明远 | 申请(专利权)人: | 重庆师范大学 |
主分类号: | G06F16/583 | 分类号: | G06F16/583;G06F40/30;G06N3/04;G06N3/08;G06V10/74;G06V10/80;G06V10/82 |
代理公司: | 合肥数字代码知识产权代理有限公司 34253 | 代理人: | 何雪峰 |
地址: | 401331 重*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于GCN的深度无监督跨模态检索方法,涉及跨模态检索技术领域,包括以下步骤:S1:利用GCN搭建文本编码器,将特征相近的文本实例联系起来,丰富文本特征,S2:使用Hadamard乘积对原始的模内相似度矩阵进行增强,提出增强注意力融合机制对不同模态的语义相似度矩阵进行融合,针对不同的实例的文本和图像相似度有不同注意力。本发明中,该机制能够随着数据集和样本的特征分布的改变而自适应地调整注意力;在三个公共数据集上的大量实验表明,所提出的DESAH方法可以学习更有效的哈希函数,以利于跨模态检索任务,并且基线方法相比,总体上显示了更高的检索精度。 | ||
搜索关键词: | 一种 基于 gcn 深度 监督 跨模态 检索 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆师范大学,未经重庆师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202211389979.7/,转载请声明来源钻瓜专利网。