[发明专利]一种基于距离聚类的支持多模态的图文检索方法及装置在审
申请号: | 202310043530.3 | 申请日: | 2023-01-29 |
公开(公告)号: | CN116049450A | 公开(公告)日: | 2023-05-02 |
发明(设计)人: | 苏海波;苏萌;刘译璟;赵群;杜晓梦 | 申请(专利权)人: | 北京百分点科技集团股份有限公司 |
主分类号: | G06F16/383 | 分类号: | G06F16/383;G06F16/583;G06F16/33;G06F16/332;G06F16/532;G06F18/22;G06F18/23213;G06F18/214 |
代理公司: | 成都正煜知识产权代理事务所(普通合伙) 51312 | 代理人: | 李龙 |
地址: | 100089 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及计算机人工智能领域,即计算机视觉、自然语言处理和信息检索结合的领域,尤其涉及一种基于距离聚类的支持多模态的图文检索方法及装置。目的在于解决现有算法需要大量的标注数据和人工操作,而且在图文搜索阶段,遍历所有图文对计算效率会很低的技术问题。主要方案包括获取原图文进行增强后,对增强后的图文数据的局部特征和全局特征,得到图像的编码向量和文本的编码向量;使用计算向量距离的方式构建正负样本;判断文本向量和图像向量是否是对应的;将学习到的文本向量和图像向量分别进行多级聚类,同时保留文本和图像之间的索引,得到图文向量库;将输入的图文,通过编码成向量,然后在图文向量库中检索,得到最终结果。 | ||
搜索关键词: | 一种 基于 距离 支持 多模态 图文 检索 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百分点科技集团股份有限公司,未经北京百分点科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310043530.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种有助戒毒脱瘾的中药浓缩丸
- 下一篇:前列腺刨削器保护装置