[发明专利]目标对象的检测方法、装置、设备和存储介质在审
申请号: | 202010108527.1 | 申请日: | 2020-02-21 |
公开(公告)号: | CN111340766A | 公开(公告)日: | 2020-06-26 |
发明(设计)人: | 钱晨;林君仪;周嘉明 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06T7/70;G06K9/46;G06N3/04 |
代理公司: | 北京林达刘知识产权代理事务所(普通合伙) 11277 | 代理人: | 刘新宇 |
地址: | 100142 北京市海淀区北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标 对象 检测 方法 装置 设备 存储 介质 | ||
1.一种目标对象的检测方法,其特征在于,包括:
对目标场景的三维点云进行特征提取,得到特征提取结果;
根据所述特征提取结果,对所述三维点云进行目标对象的类别预测以及位置预测,确定所述目标场景中的目标对象的至少一个候选区域;
在每个所述候选区域中,对所述目标对象进行检测,得到检测结果。
2.根据权利要求1所述的方法,其特征在于,所述对目标场景的三维点云进行特征提取,得到特征提取结果,包括:
对所述三维点云进行采样,得到至少一个第一采样点;
在所述三维点云中构建至少一个以所述第一采样点为中心的采样区域;
对每个所述采样区域进行特征提取,得到至少一个所述采样区域的特征向量;
根据每个所述采样区域的特征向量,分别确定所述三维点云包括的每个三维点的特征向量,作为所述特征提取结果。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述特征提取结果,对所述三维点云进行目标对象的类别预测以及位置预测,确定所述目标场景中的目标对象的至少一个候选区域,包括:
根据所述特征提取结果,对所述三维点云进行目标对象的类别预测,得到类别预测结果,其中,所述类别预测结果用于指示所述三维点云包括的三维点所属的目标对象的类别;
根据所述特征提取结果,对所述三维点云进行目标对象的位置预测,得到位置预测结果,其中,所述位置预测结果用于指示所述三维点云中目标对象所在的三维点的位置;
根据所述类别预测结果和所述位置预测结果,确定所述场景中包括所述目标对象的至少一个候选区域。
4.根据权利要求3所述的方法,其特征在于,所述根据所述特征提取结果,对所述三维点云进行类别预测,得到类别预测结果,包括:
将所述特征提取结果通过类别预测卷积网络进行处理,得到所述三维点云包括的每个三维点所属的目标对象的类别。
5.根据权利要求3或4所述的方法,其特征在于,所述根据所述特征提取结果,对所述三维点云进行位置预测,得到位置预测结果,包括:
将所述特征提取结果通过位置预测卷积网络进行处理,得到所述三维点云包括的每个三维点与每个预设检测框之间的残差量,其中,所述预设检测框的数量不少于一个;
根据所述残差量,得到每个所述三维点匹配的检测框,作为所述位置预测结果。
6.根据权利要求5中所述的方法,其特征在于,所述位置预测卷积网络通过训练数据训练,所述训练数据包括三维点云样本、目标对象在所述三维点云样本中的第一位置以及与所述目标对象的类别对应的至少一个第一特征向量,所述训练包括:
基于所述三维点云样本和初始位置预测卷积网络,得到第一位置预测结果;
根据所述第一位置预测结果与所述第一位置之间的误差,得到第一误差损失;
根据所述三维点云样本包括的每个三维点的特征向量,与每个所述第一特征向量之间的距离,得到第二误差损失;
根据所述第一误差损失和/或第二误差损失,对所述初始位置预测卷积网络进行训练。
7.根据权利要求3至6中任意一项所述的方法,其特征在于,所述根据所述类别预测结果和所述位置预测结果,确定所述场景中包括所述目标对象的至少一个候选区域,包括:
获取所述位置预测结果包括的每个检测框;
根据每个所述检测框包括的三维点的类别预测结果,得到每个所述检测框的预测分数;
将所述预测分数大于分数阈值的检测框,作为所述目标对象的至少一个候选区域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010108527.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:取货柜及配货系统
- 下一篇:网络资产异常检测方法、系统、介质和设备