[发明专利]一种基于激光雷达与单目相机的障碍物检测与测量方法有效
申请号: | 202110291251.X | 申请日: | 2021-03-18 |
公开(公告)号: | CN113096183B | 公开(公告)日: | 2023-05-16 |
发明(设计)人: | 蒋林;马先重;聂文康;赵慧;雷斌 | 申请(专利权)人: | 武汉科技大学 |
主分类号: | G06T7/73 | 分类号: | G06T7/73;G06T7/80;G06T7/12;G06T7/13;G06T7/194 |
代理公司: | 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 | 代理人: | 胡琦旖 |
地址: | 430081 湖北*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 激光雷达 相机 障碍物 检测 测量方法 | ||
本发明属于移动机器人技术领域,公开了一种基于激光雷达与单目相机的障碍物检测与测量方法,包括对激光雷达与单目相机进行联合标定得到标定信息;通过单目相机获取障碍物对应的第一图像信息,利用深度学习网络模型对第一图像信息进行目标检测得到障碍物位置信息;利用图像分割算法对障碍物位置信息中的环境背景干扰信息进行去除得到障碍物目标区域信息;利用边缘检测算法对障碍物目标区域信息进行轮廓提取得到轮廓信息;对障碍物目标区域信息中的激光雷达点进行曲率计算得到曲率信息;根据轮廓信息和曲率信息得到障碍物的测量面;基于标定信息和障碍物的测量面上的激光雷达数据得到障碍物的尺寸信息。本发明能够准确检测障碍物并测量其尺寸。
技术领域
本发明属于移动机器人技术领域,更具体地,涉及一种基于激光雷达与单目相机的障碍物检测与测量方法。
背景技术
目前,随着科学技术的不断发展,机器人技术逐渐成熟且趋于智能化。目前较为广泛的应用有无人驾驶、扫地机器人、服务机器人以及巡检机器人等。这些机器人的智能化离不开其对环境信息的感知,而障碍物检测与测量是移动机器人环境感知领域的重要组成部分。
障碍物检测与测量即机器人利用自身所搭载传感器获得环境信息。障碍物检测与测量是移动机器人完成避障与路径规划的前提,也是移动机器人环境感知的基本目标。激光雷达作为障碍物检测的常用传感器,但其只能获得环境的二维信息,难以使机器人准确探知三维环境;单目相机可以获得较为丰富的环境信息,但其无法提供物体的尺度信息,而且容易受到机器人自身运动的影响。单一传感器难以解决障碍物检测与测量问题
对于室内移动机器人如何解决上述出现的问题,准确检测障碍物与测量其尺寸成为移动机器人研究的热点问题。
发明内容
为了解决现有技术存在的问题,本发明提供一种基于激光雷达与单目相机的障碍物检测与测量方法。
本发明提供一种基于激光雷达与单目相机的障碍物检测与测量方法,包括以下步骤:
步骤1、对激光雷达与单目相机进行联合标定,得到标定信息;
步骤2、通过所述单目相机获取障碍物对应的第一图像信息,利用训练好的深度学习网络模型对所述第一图像信息进行目标检测,得到障碍物位置信息;
步骤3、利用图像分割算法对所述障碍物位置信息中的环境背景干扰信息进行去除,得到障碍物目标区域信息;
步骤4、利用边缘检测算法对所述障碍物目标区域信息进行轮廓提取,得到轮廓信息;对所述障碍物目标区域信息中的激光雷达点进行曲率计算,得到曲率信息;根据所述轮廓信息和所述曲率信息得到障碍物的测量面;
步骤5、基于所述标定信息和所述障碍物的测量面上的激光雷达数据,得到障碍物的尺寸信息。
优选的,所述标定信息包括所述单目相机的内参,以及所述激光雷达相对于所述单目相机的旋转矩阵和位移矩阵;
所述步骤1包括以下子步骤:
步骤1.1、制作联合标定板,所述联合标定板包括黑白棋盘格;
步骤1.2、将所述联合标定板置于所述单目相机与所述激光雷达的正前方,使所述单目相机能够获得所述黑白棋盘格的全貌,同时确保能有大于第一数量的激光雷达点击中所述联合标定板,并获得击中所述联合标定板的激光雷达点的坐标信息;
步骤1.3、利用张正友标定法对所述单目相机进行标定,获得所述单目相机的内参和联合标定板的空间平面方程;
步骤1.4、根据所述联合标定板的空间平面方程和所述击中联合标定板的激光雷达点的坐标信息,得到所述激光雷达相对于所述单目相机的旋转矩阵和位移矩阵。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉科技大学,未经武汉科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110291251.X/2.html,转载请声明来源钻瓜专利网。