[发明专利]基于注意力网络对抗哈希的跨模态检索方法及设备在审
| 申请号: | 202310722310.3 | 申请日: | 2023-06-16 |
| 公开(公告)号: | CN116737877A | 公开(公告)日: | 2023-09-12 |
| 发明(设计)人: | 黄昭;苏苗 | 申请(专利权)人: | 陕西师范大学 |
| 主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/53;G06F18/213;G06F18/22;G06N3/0442;G06N3/0499 |
| 代理公司: | 西安通大专利代理有限责任公司 61200 | 代理人: | 王艾华 |
| 地址: | 710119 陕西*** | 国省代码: | 陕西;61 |
| 权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
| 摘要: | 本发明提出了一种基于注意力网络对抗哈希的跨模态检索方法及设备,方法包括:获得图像‑文本对数据,提取图像数据和文本数据的初始全局特征,将图像数据的初始全局特征和文本数据的初始全局特征分别经过共享注意力模块处理,获得图像数据和文本数据的最终特征表示;模态判别器以对抗式的方式和特征提取器相互作用,促使模态特征提取器学习到更好的图文特征;将图像数据和文本数据的最终特征表示转换为二进制编码,将其特征映射到公共汉明空间中,进行跨模态检索,获得前K个跨模态检索的结果。本发明将对抗网络与哈希学习网络结合,既利用了对抗网络学习促使特征提取器学习模态不变表示,同时也利用了哈希快速检索的特性,从而实现跨模态检索。 | ||
| 搜索关键词: | 基于 注意力 网络 对抗 跨模态 检索 方法 设备 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于陕西师范大学,未经陕西师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310722310.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种智能应急电源
- 下一篇:一种还原钛铁粉煅烧回转炉进料预热装置





