[发明专利]点云数据中目标的检测方法、装置和计算机可读存储介质在审
申请号: | 202210409033.6 | 申请日: | 2022-04-19 |
公开(公告)号: | CN115018910A | 公开(公告)日: | 2022-09-06 |
发明(设计)人: | 潘滢炜;李栋;邱钊凡;姚霆;梅涛 | 申请(专利权)人: | 京东科技信息技术有限公司 |
主分类号: | G06T7/73 | 分类号: | G06T7/73;G06K9/62;G06V10/764 |
代理公司: | 中国贸促会专利商标事务所有限公司 11038 | 代理人: | 孙玉;许蓓 |
地址: | 100176 北京市大兴区北京经*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 目标 检测 方法 装置 计算机 可读 存储 介质 | ||
本公开涉及一种点云数据中目标的检测方法、装置和计算机可读存储介质,涉及计算机技术领域。本公开的方法包括:将点云数据输入点云特征提取网络,得到输出的点云数据中的多个关键点,以及各个关键点的特征信息;针对每个关键点,根据该关键点与该关键点预设范围内的其他关键点之间的关联性,对该关键点的特征信息进行编码,得到该关键点的第一特征编码;对各个关键点进行分类,确定分类为目标中心的点,作为参考中心点;针对每个参考中心点,根据该参考中心点与其他参考中心点之间的关联性,对该参考中心点的第一特征编码进行编码,得到该参考中心点的第二特征编码;根据各个参考中心点的第二特征编码,预测点云数据中各个目标的位置和类别。
技术领域
本公开涉及计算机技术领域,特别涉及一种点云数据中目标的检测方法、装置和计算机可读存储介质。
背景技术
3D(3-dimension,三维)目标检测的目的是识别并定位3D点云中出现的物体,已经在自动驾驶和增强现实等领域获得了广泛应用。与2D图像相比,3D点云可以提供物体的几何形状并捕获场景的3D结构。
发明内容
发明人发现:由于点云的三维特征以及不规则性,无法使用卷积神经网络等强大的深度学习模型直接处理,因此需要专门的3D特征学习技术,以识别点云数据中的目标。
本公开所要解决的一个技术问题是:提出一种点云数据中目标的检测方法,提高点云数据中目标检测的准确性。
根据本公开的一些实施例,提供的一种点云数据中目标的检测方法,包括:将点云数据输入点云特征提取网络,得到输出的点云数据中的多个关键点,以及各个关键点的特征信息;针对每个关键点,根据该关键点与该关键点预设范围内的其他关键点之间的关联性,对该关键点的特征信息进行编码,得到该关键点的第一特征编码;对各个关键点进行分类,确定分类为目标中心的点,作为参考中心点;针对每个参考中心点,根据该参考中心点与其他参考中心点之间的关联性,对该参考中心点的第一特征编码进行编码,得到该参考中心点的第二特征编码;根据各个参考中心点的第二特征编码,预测点云数据中各个目标的位置和类别。
在一些实施例中,针对每个关键点,根据该关键点与该关键点预设范围内的其他关键点之间的关联性,对该关键点的特征信息进行编码,得到该关键点的第一特征编码包括:针对每个关键点,根据该关键点的特征信息,该关键点预设范围内的其他关键点的特征信息,以及该关键点与该关键点预设范围内的其他关键点之间相对位置关系,基于自注意力机制确定该关键点的第一特征编码。
在一些实施例中,针对每个关键点,根据该关键点的特征信息,该关键点预设范围内的其他关键点的特征信息,以及该关键点与该关键点预设范围内的其他关键点之间相对位置关系,基于自注意力机制确定该关键点的第一特征编码包括:针对每个关键点,将该关键点的特征信息和位置信息,该关键点预设范围内的其他关键点的特征信息和位置信息输入第一转换模型中编码器的第一自注意力模块;在第一自注意力模块中,将该关键点预设范围内的其他关键点作为相对点,针对每个相对点,将该关键点的位置信息与该相对点的位置信息分别输入第一位置编码层、第二位置编码层和第三位置编码层,确定该关键点与该相对点的第一相对位置编码,第二相对位置编码和第三相对位置编码;根据该相对点的特征信息分别与第一自注意力模块中键矩阵和值矩阵的乘积,确定该相对点的键向量和值向量;根据该关键点的特征信息与第一自注意力模块中查询矩阵的乘积,确定该关键点的查询向量;根据该关键点与每个相对点的第一相对位置编码,第二相对位置编码和第三相对位置编码、每个相对点的键向量、每个相对点的值向量和该关键点的查询向量,确定该关键点的第一特征编码。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东科技信息技术有限公司,未经京东科技信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210409033.6/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置