[发明专利]深度对抗注意力跨模态哈希检索方法及系统在审
申请号: | 202111214287.4 | 申请日: | 2021-10-19 |
公开(公告)号: | CN114090801A | 公开(公告)日: | 2022-02-25 |
发明(设计)人: | 张化祥;王本惠;刘丽;朱磊;孙建德;聂礼强;金圣开 | 申请(专利权)人: | 山东师范大学 |
主分类号: | G06F16/432 | 分类号: | G06F16/432;G06F16/332;G06F16/48;G06F16/532;G06F16/583;G06N3/04;G06N3/08 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 李圣梅 |
地址: | 250014 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出了深度对抗注意力跨模态哈希检索方法及系统,包括:注意力学习步骤:获得图像和文本两种模态,利用通道注意力机制,将每个模态的特征表示分为相关的模态特征和不相关的模态特征;模内对抗学习步骤:通过生成对抗网络将每个模态内的不相关特征补充每个模态的相关特征表示信息;模间对抗学习学习步骤:将图像模态的相关的模态特征设为真,将文本模态的相关的模态特征设为假,通过模间对抗学习使得两种模态各自的相关特征表示分布均匀;哈希学习步骤:将图像相关特征和文本相关特征映射在汉明空间中,用于进行跨模态检索。将生成对抗网络、注意力机制、哈希学习结合在一起,相比较之前跨模态检索方法,进一步提高了跨模态检索的准确度。 | ||
搜索关键词: | 深度 对抗 注意力 跨模态哈希 检索 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东师范大学,未经山东师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111214287.4/,转载请声明来源钻瓜专利网。