[发明专利]一种注意力相似度迁移的跨模态哈希检索方法在审
| 申请号： | 202210882910.1 | 申请日： | 2022-07-26 |
| 公开（公告）号： | CN115098620A | 公开（公告）日： | 2022-09-23 |
| 发明（设计）人： | 王海荣;梁焕 | 申请（专利权）人： | 北方民族大学 |
| 主分类号： | G06F16/31 | 分类号： | G06F16/31;G06F16/33;G06F16/51;G06F16/583;G06F40/194;G06F40/30;G06N3/04;G06N3/08 |
| 代理公司： | 广州市华学知识产权代理有限公司 44245 | 代理人： | 冯炳辉 |
| 地址： | 750021 宁夏回族*** | 国省代码： | 宁夏;64 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种注意力相似度迁移的跨模态哈希检索方法，包括：特征提取多模态数据，得到文本特征向量和图像特征图；将图像特征图利用混合自注意力机制分配自注意力权重，利用多头注意力机制对文本特征向量分配自注意力权重，根据自注意力权重大小分别强化关注图像和文本的关键特征；将图像和文本的关键特征进行多模态共同注意力机制处理，将多模态数据特征映射至公共实值空间；计算公共实值空间的特征相似度，利用迁移学习和哈希函数，将相似关系从公共实值空间迁移至哈希空间，训练得到哈希码；根据哈希码计算相似度，并进行排序。本发明能够强化关注图像和文本的关键信息，提升特征提取质量，加强了模态间的信息交互，同时降低了训练难度。 | ||
| 搜索关键词： | 一种 注意力 相似 迁移 跨模态哈希 检索 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北方民族大学，未经北方民族大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210882910.1/，转载请声明来源钻瓜专利网。
- 上一篇：液冷装置、电池模组及动力电池包
- 下一篇：直升机旋翼厚度噪声的双紧致预测方法
