[发明专利]一种基于一致性修正和挖掘的鲁棒跨模态检索方法在审
| 申请号: | 202310339912.0 | 申请日: | 2023-03-31 |
| 公开(公告)号: | CN116383271A | 公开(公告)日: | 2023-07-04 |
| 发明(设计)人: | 彭玺;马鑫然;杨谋星;胡鹏 | 申请(专利权)人: | 四川大学 |
| 主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/25;G06N3/08;G06N3/047 |
| 代理公司: | 成都正德明志知识产权代理有限公司 51360 | 代理人: | 黄鑫 |
| 地址: | 610042 四川*** | 国省代码: | 四川;51 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明提出了一种基于一致性修正和挖掘的鲁棒跨模态检索方法,涉及跨模态检索技术领域,包括:S1、获取待检索的数据集,并对其进行数据预处理;S2、使用跨模态信息噪声对比估计损失函数训练得到两个单独的神经网络模型A和B;S3、将预处理后的数据集分别送入模型A和模型B以协同划分;S4、对划分好的数据集进行一致性修正和一致性挖掘;S5、重复步骤S3~S4进行鲁棒的跨模态检索训练,直至网络A和网络B收敛以得到训练完成的网络A和网络B;S6、利用训练完成的网络A和网络B进行跨模态检索以得到检索结果;本发明通过一致性修正和挖掘实现了鲁棒的跨模态检索,可以为本应丢弃的数据对寻找配对数据,提高了跨模态检索的性能。 | ||
| 搜索关键词: | 一种 基于 一致性 修正 挖掘 鲁棒跨模态 检索 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川大学,未经四川大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310339912.0/,转载请声明来源钻瓜专利网。





