[发明专利]一种融合毫米波雷达与单目相机的轻量级目标跟踪方法在审
申请号: | 202210798905.2 | 申请日: | 2022-07-06 |
公开(公告)号: | CN115166717A | 公开(公告)日: | 2022-10-11 |
发明(设计)人: | 朱威;初君;张津;何德峰;郑雅羽 | 申请(专利权)人: | 浙江工业大学 |
主分类号: | G01S13/72 | 分类号: | G01S13/72;G01S13/86;G01S13/931;G01S7/40;G06K9/62;G06V10/80;G06T7/277;G06T7/80;G06V10/762;G06V10/82;G06V10/26;G06V20/56 |
代理公司: | 杭州赛科专利代理事务所(普通合伙) 33230 | 代理人: | 宋飞燕 |
地址: | 310014 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 融合 毫米波 雷达 相机 轻量级 目标 跟踪 方法 | ||
1.一种融合毫米波雷达与单目相机的轻量级目标跟踪方法,其特征在于,所述方法包括以下步骤:
将毫米波雷达和单目相机进行联合标定;
以运动参数为过滤基准,并通过欧几里德聚类算法筛选毫米波雷达检测到的当前帧的点云数据;
对单目相机采集当前图像并进行目标检测和车道线检测,并获取当前车道线内的目标点云数据;
通过卡尔曼滤波进行目标稳定跟踪。
2.如权利要求1所述的一种融合毫米波雷达与单目相机的轻量级目标跟踪方法,其特征在于,所述联合标定包括以下步骤:
对单目相机进行标定,并得到世界坐标系和像素坐标系间的转换模型;
将毫米波雷达坐标系转换到世界坐标系;
同步毫米波雷达与单目相机的采样频率。
3.如权利要求1所述的一种融合毫米波雷达与单目相机的轻量级目标跟踪方法,其特征在于,所述毫米波雷达检测到的点云数据包括若干扫描点信息,任一扫描点信息包括位置坐标(x,y)及相对速度v,所述筛选包括以下步骤:
计算每一扫描点的欧几里德距离D;
判断欧几里德距离D是否不大于经验阈值,若是,则保留,否则丢弃。
4.如权利要求1所述的一种融合毫米波雷达与单目相机的轻量级目标跟踪方法,其特征在于,对单目相机采集当前图像并进行目标检测和车道线检测包括以下步骤:
通过训练后的YOLOP网络模型得到目标类别和车道线语义分割图像;
对车道线语义分割图像使用密度聚类算法解析各车道线,并提取出本车所在车道内的两条车道线。
5.如权利要求4所述的一种融合毫米波雷达与单目相机的轻量级目标跟踪方法,其特征在于,所述获取当前车道线内的目标点云数据包括以下步骤:
将筛选后的点云数据、提取的两条车道线与当前图像进行数据融合;
剔除非当前车道线区域内的点云数据;
基于目标区域获取融合在当前图像中的目标点信息。
6.如权利要求1-5任一项所述的一种融合毫米波雷达与单目相机的轻量级目标跟踪方法,其特征在于,所述目标稳定跟踪包括以下步骤:
前置判定步骤,判断当前图像是否为初始图像,若是,为初始图像的目标点分配初始ID,并输出目标类别,否则执行一致性判定步骤;
一致性判定步骤,判定当前图像的当前目标点个数与上一帧图像的目标点个数是否相同,若是,执行相似度匹配步骤,否则为当前目标点分配新的ID,并输出目标类别;
相似度匹配,通过卡尔曼滤波算法预测上一帧图像的目标点信息,计算预测结果与当前目标点信息的相似度,若相似度大于阈值,则ID不变,并更新卡尔曼状态方程,否则为当前目标点分配新的ID,并输出目标类别。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江工业大学,未经浙江工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210798905.2/1.html,转载请声明来源钻瓜专利网。