[发明专利]基于有监督对比的跨模态检索方法、系统及设备有效
| 申请号： | 202110543714.7 | 申请日： | 2021-05-19 |
| 公开（公告）号： | CN113239214B | 公开（公告）日： | 2022-10-28 |
| 发明（设计）人： | 徐常胜;钱胜胜;方全 | 申请（专利权）人： | 中国科学院自动化研究所 |
| 主分类号： | G06F16/43 | 分类号： | G06F16/43;G06F17/16;G06F40/30;G06K9/62;G06N3/04 |
| 代理公司： | 北京市恒有知识产权代理事务所(普通合伙) 11576 | 代理人： | 郭文浩;尹文会 |
| 地址： | 100190 *** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明属于跨模态检索领域，具体涉及了一种基于有监督对比的跨模态检索方法、系统及设备，旨在解决现有的监督式跨模态学习方法一般通过线性投影捕获数据相关性，且通常聚集于最大化成对相关性或分类准确性，InfoNCE损失平等对待所有类别，从而导致跨模态检索结果准确性不高的问题。本发明包括：获取待检索的跨模态输入数据；通过表示学习网络映射到统一空间中，获得输入数据的跨模态表示；通过训练好的跨模态检索网络进行跨模态检索。本发明将不同模态的数据映射到统一空间中，通过多标签判别性负例注意力提高具有高共现概率的语义上不同类别的样本对的比例，将InfoNCE损失函数扩展为多标签跨模态InfoNCE损失函数，实现了高准确性与高精度的跨模态检索。 | ||
| 搜索关键词： | 基于 监督 对比 跨模态 检索 方法 系统 设备 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于中国科学院自动化研究所，未经中国科学院自动化研究所许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110543714.7/，转载请声明来源钻瓜专利网。
- 上一篇：一种单曲面翻转式双光LED透镜总成
- 下一篇：预防医学用疫苗保温箱
