[发明专利]基于端到端网络的物件定位与检索方法及相关设备在审
申请号: | 202111432165.2 | 申请日: | 2021-11-29 |
公开(公告)号: | CN114170504A | 公开(公告)日: | 2022-03-11 |
发明(设计)人: | 施宏恩;吴伟华;禹世杰;曾儿孟 | 申请(专利权)人: | 深圳市华尊科技股份有限公司 |
主分类号: | G06V20/10 | 分类号: | G06V20/10;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强 |
地址: | 518000 广东省深圳市福田区沙头街道天安社*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 端到端 网络 物件 定位 检索 方法 相关 设备 | ||
1.一种物件定位与检索方法,其特征在于,所述方法包括:
获取目标图像;
将所述目标图像输入到第一特征提取层进行特征提取,得到第一特征图像;
将所述第一特征图像输入到卷积层,得到第二特征图像;
将所述第二特征图像输入到物件信息层,得到物件信息特征图,所述物件信息特征图包括:物件的类型、位置、和物件权重特征;
将所述物件信息特征图输入到数据分析层,解析出物件的类型、位置和物件权重特征,将物件权重特征构造成二维权重矩阵,将物件位置所在的ROI图像压缩到固定尺寸与所述二维权重矩阵进行卷积计算,得到物件REID特征图;
将所述物件REID特征图输入到第二特征提取层,得到第三特征图像;
将所述第三特征图像输入依次输入到第一全连接层、第二全连接层以及第一归一化层,得到压缩特征维度之后的物件重识别特征。
2.根据权利要求1所述的方法,其特征在于,所述将所述物件信息特征图输入到数据分析层,解析出物件的类型、位置和权重特征,将权重特征构造成二维权重矩阵,将物件位置所在的ROI图像压缩到固定尺寸与所述二维权重矩阵进行卷积计算,得到物件REID特征图,包括:
将所述物件信息特征图解析出物件类型、位置和权重特征;解析出物件在图像中的位置,获取所述物件ROI,将物件ROI压缩到固定尺寸;
将所述权重特征对应的权重向量构造成二维权重矩阵,并将压缩后的物件ROI与物件权重矩阵特征进行卷积计算,得到n*n的网络特征图;
将所述n*n的网络特征图输入到激活函数,得到n*n的所述物件REID特征图。
3.根据权利要求1或2所述的方法,其特征在于,在所述目标图像中有P个物件,且进行搜索时,所述P为大于1的正整数,所述方法还包括:
根据所述物件重识别特征确定所述P个物件在各自底库中的各个相似概率,得到Q个概率,Q为正整数;
根据所述Q个概率构造成查询图像的第一级向量;
获取所述物件信息层输出查询图像中各个物件的检索概率,将该检索概率构造第二级向量;
根据所述第一级向量与所述第二级向量确定检索概率。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述方法还包括:
在训练阶段,通过第一损失函数对所述第一特征层的网络模型进行训练,所述第一损失函数用于来优化图像中物件的类型、位置、物件权重特征;
和/或,
在训练阶段,所述第一全连接层连接第一归一化层,通过第二损失函数对所述第一归一化层的REID特征网络模型进行优化训练,所述第二损失函数用于指示所述样本图像与所述第一归一化层的输出结果之间的差异;
和/或,
在训练阶段,所述第二全连接层连接第二归一化层,通过第三损失函数对所述第二归一化的REID特征网络模型进行优化训练,所述第三损失函数用于指示所述样本图像与所述第二归一化层之间的差异。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
获取目标硬件参数;
确定与所述目标硬件参数对应的目标网络配置参数;
根据所述目标网络配置参数对所述第一特征提取层以及第二特征提取层的网络模型进行配置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市华尊科技股份有限公司,未经深圳市华尊科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111432165.2/1.html,转载请声明来源钻瓜专利网。