[发明专利]图像检索方法、装置及电子设备在审
| 申请号: | 201910580710.9 | 申请日: | 2019-06-29 |
| 公开(公告)号: | CN110287350A | 公开(公告)日: | 2019-09-27 |
| 发明(设计)人: | 周恺卉;朱延东;王长虎 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
| 主分类号: | G06F16/535 | 分类号: | G06F16/535;G06F16/583;G06N3/04 |
| 代理公司: | 北京竹辰知识产权代理事务所(普通合伙) 11706 | 代理人: | 陈龙 |
| 地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 目标图像 网络模型 装置及电子设备 检索 检索图像 特征矩阵 特征图像 图像检索 数据处理技术 特征计算 特征提取 图像识别 训练数据 第一层 标注 | ||
1.一种图像检索方法,其特征在于,包括:
利用第一网络模型的第一层组对待检索图像进行特征提取,得到第一特征图像;
通过第二网络模型对目标图像进行特征计算,得到与所述目标图像相关的特征矩阵;
基于所述特征矩阵和所述第一特征图像,利用所述第一网络模型的第二层组进行检索操作,所述检索操作用于确定所述待检索图像上是否包含所述目标图像。
2.根据权利要求1所述的方法,其特征在于,所述利用第一网络模型的第一层组对待检索图像进行特征提取,包括:
在所述第一层组中,设置多个特征图;
基于所述多个特征图,对所述待检索图像上的对象进行检测。
3.根据权利要求2所述的方法,其特征在于,所述基于所述多个特征图,对所述待检索图像上的对象进行检测,包括:
在所述第一层组中生成多个固定大小的边界框,每个边界框中包含对象的预测值;
对所述边界框进行非极大值抑制,得到最终的针对对象的预测值;
基于所述最终的针对对象的预测值,确定所述对象的类型。
4.根据权利要求1所述的方法,其特征在于,所述利用第一网络模型的第一层组对待检索图像进行特征提取,包括:
在所述第一层组添加附加卷积层,所述附加卷积层的大小逐层递减。
5.根据权利要求1所述的方法,其特征在于,所述利用第一网络模型的第一层组对待检索图像进行特征提取,包括:
对所述第一层组中的特征层设置多个卷积滤波器,所述卷积滤波器用于产生固定大小的预测值,。
6.根据权利要求1所述的方法,其特征在于,所述通过第二网络模型对目标图像进行特征计算,得到与所述目标图像相关的特征矩阵,包括:
获取所述第二网络模型对于所述目标图像的计算结果;
将所述计算结果作为与所述目标图像相关的特征矩阵。
7.根据权利要求1所述的方法,其特征在于,所述基于所述特征矩阵和所述第一特征图像,利用所述第一网络模型的第二层组进行检索操作,包括:
将所述特征矩阵作为所述第二层组最后一个卷积层的卷积核;
利用所述卷积核与所述第二层组输出的特征图进行卷积计算,得到多个特征图;
基于所述多个特征图,确定最终的检索结果。
8.根据权利要求7所述的方法,其特征在于,所述基于所述多个特征图,确定最终的检索结果,包括:
确定与所述多个特征图对应的多个基准窗;
对所述多个基准窗进行分类回归计算;
基于所述分类回归计算的结果,确定所述待检索图像上是否包含所述目标图像。
9.一种图像检索装置,其特征在于,包括:
提取模块,用于利用第一网络模型的第一层组对待检索图像进行特征提取,得到第一特征图像;
计算模块,用于通过第二网络模型对目标图像进行特征计算,得到与所述目标图像相关的特征矩阵;
检索模块,用于基于所述特征矩阵和所述第一特征图像,利用所述第一网络模型的第二层组进行检索操作,所述检索操作用于确定所述待检索图像上是否包含所述目标图像。
10.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述任一权利要求1-8所述的图像检索方法。
11.一种非暂态计算机可读存储介质,该非暂态计算机可读存储介质存储计算机指令,该计算机指令用于使该计算机执行前述任一权利要求1-8所述的图像检索方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910580710.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:图形生成方法、装置、介质及终端
- 下一篇:一种三维模型轻量化展示优化方法





