[发明专利]目标检测方法、系统及存内计算芯片在审
| 申请号: | 202210694506.1 | 申请日: | 2022-06-17 |
| 公开(公告)号: | CN114998705A | 公开(公告)日: | 2022-09-02 |
| 发明(设计)人: | 黄斌;蔡国榕;吴仕龙;刘晋明 | 申请(专利权)人: | 集美大学 |
| 主分类号: | G06V10/82 | 分类号: | G06V10/82;G06V10/25;G06N3/08;G06N3/04;G06V10/44;G06N3/063;G06F15/78 |
| 代理公司: | 福建如浩律师事务所 35223 | 代理人: | 刘开林 |
| 地址: | 361000 福*** | 国省代码: | 福建;35 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 目标 检测 方法 系统 计算 芯片 | ||
1.一种目标检测方法,其特征在于,所述方法应用于存内计算芯片,目标检测网络、消息通信神经网络、特征后处理神经网络均部署于所述存内计算芯片中,所述方法包括:
获取待检测图像;
将所述待检测图像输入至所述目标检测网络,得到所述目标检测网络输出的所述待检测图像中的第一锚点特征信息,其中,每一锚点对应一候选预测框;
将所述第一锚点特征信息输入至所述消息通信神经网络,以由所述消息通信神经网络对所述第一锚点特征信息进行卷积操作处理,得到第二锚点特征信息;
将所述第二锚点特征信息输入至所述特征后处理神经网络,得到多个锚点各自的目标置信度;
根据所述目标置信度,从多个候选预测框中确定目标框,并将所述目标框的信息发送至显示装置,以由所述显示装置对所述目标框进行显示。
2.根据权利要求1所述的方法,其特征在于,所述消息通信神经网络是通过如下方式训练得到的:
从训练数据集中获取训练图像;
将所述训练图像输入至所述目标检测网络,得到多个锚点各自的锚点特征信息,其中,多个锚点与多个预测框一一对应,锚点的锚点特征信息包括该锚点对应的预测框中包含训练目标的第一置信度、该锚点对应的预测框的中心点坐标、该锚点对应的预测框的宽度和高度;
将多个锚点各自的锚点特征信息输入至神经网络的卷积核中,以由所述卷积核提取每一锚点的局部特征关系,并计算锚点对应的预测框中包含训练目标的第二置信度;
根据所述第二置信度去除所述多个预测框中的冗余预测框并过滤掉无效预测框,得到训练预测框;
根据所述训练预测框中包含训练目标的第二置信度、所述训练预测框的中心点坐标、宽度和高度,以及所述训练图像的真实目标框中包含训练目标的真实置信度、所述真实目标框的中心点坐标、宽度和高度,计算损失值;
根据所述损失值对所述神经网络的卷积核进行迭代训练,在训练完成的情况下,得到所述特征提取神经网络。
3.根据权利要求1所述的方法,其特征在于,所述消息通信神经网络中包括Concatenate网络,所述消息通信神经网络用于通过如下方式得到第二锚点特征信息:
所述Concatenate网络将经过卷积处理的第一锚点特征信息与如下信息之一进行拼接:零矩阵、消息通信神经网络上一次输出的锚点特征信息,以扩大锚点特征的感受野;
将所述Concatenate网络输出的锚点特征信息进行卷积压缩,以得到所述第二锚点特征信息。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述消息通信神经网络为可学习NMS网络。
5.一种目标检测系统,其特征在于,所述系统部署于存内计算芯片,所述系统包括的目标检测网络、消息通信神经网络、特征后处理神经网络均部署于所述存内计算芯片中;
所述目标检测网络,用于对待检测图像进行处理,得到所述待检测图像中的第一锚点特征信息,其中,每一锚点对应一候选预测框;
所述消息通信神经网络,用于对所述第一锚点特征信息进行卷积操作处理,得到第二锚点特征信息;
所述特征后处理神经网络,用于根据所述第二锚点特征信息,得到多个锚点各自的目标置信度;
结果输出模块,用于根据所述目标置信度,从多个候选预测框中确定目标框,并将所述目标框的信息发送至显示装置,以由所述显示装置对所述目标框进行显示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于集美大学,未经集美大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210694506.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种光伏背板高效玻璃油墨
- 下一篇:风味麻辣干丝





