[发明专利]一种基于深度相机和可见光通信的信标地图构建方法在审

专利信息
申请号: 202111389612.0 申请日: 2021-11-22
公开(公告)号: CN114067070A 公开(公告)日: 2022-02-18
发明(设计)人: 文尚胜;杨跃腾;关伟鹏 申请(专利权)人: 华南理工大学;广东光寻技术有限公司
主分类号: G06T17/05 分类号: G06T17/05;G06T7/70;G06T5/00;G06T3/00
代理公司: 北京东方盛凡知识产权代理事务所(普通合伙) 11562 代理人: 李娜
地址: 510641*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 深度 相机 可见 光通信 信标 地图 构建 方法
【权利要求书】:

1.一种基于深度相机和可见光通信的信标地图构建方法,其特征在于包括以下步骤:

步骤一、调制LED灯光,并在调制过程中对每个LED灯体分配一个ID编码;

步骤二、调整CCD工业相机,利用工业相机捕捉调制后的LED灯光,获得LED灯体的ID消息以及灯体中心的像素坐标,并通过里程计获得偏航角度;

步骤三、对t时刻的终端航向角α*、工业相机捕获的LED灯光图片以及LED灯体的ID消息经特征化算法得到每一个位姿下的可见光定位的特征;

步骤四、利用深度相机捕获周围环境的RGBD图像,利用基于ORB-SLAM2算法的LoopClosing线程得到t时刻的深度相机位姿,再经过TF变换转换成LED灯光捕获装置的位姿;

步骤五、对利用深度相机得到的LED灯光捕获装置的位姿及每个位姿下的可见光定位特征进行时间戳上的匹配,得到一个初始可见光定位特征的地图;

步骤六、对初始可见光定位特征的地图进行基于ID上的分类,同时对处于观测到同一个ID特征下预估对应ID的灯具中心的初始世界坐标;

步骤七、利用得到的初始灯具中心的世界坐标及t时刻下的位姿,采用观测函数预估t时刻下的可见光定位的特征,优化灯具中心的世界坐标与工业相机位姿;

步骤八、对经过能观测到之前相同ID的有效范围内的一段位姿通过ICP执行闭环相似检测,减少位姿的误差。

2.根据权利要求1所述的一种基于深度相机和可见光通信的信标地图构建方法,其特征在于:所述步骤一中对LED灯光的调制是使LED灯光的发光芯片按照调制的频率进行闪烁,闪烁频率对应于调制的信号。

3.根据权利要求1所述的一种基于深度相机和可见光通信的信标地图构建方法,其特征在于:所述步骤二中调整CCD工业相机时使工业相机的相机坐标系的yc轴与turtlebot2的前行方向一致,所述步骤二中具体包括

1)获得灯体的ID消息,将CCD工业相机水平安装在捕获装置上,并调整捕获装置使其捕捉到不多于一个LED灯体的LED灯光,捕获LED灯光后根据LED灯光中调制的内容解析出LED灯体的ID;

2)获得LED灯体的灯具中心,先将图像转换为灰度图,利用高斯模糊处理减少高频噪声并对图像执行二值化,检测到灯具中心区域图像的轮廓后计算轮廓区域的图像矩,获取轮廓中心;

3)获取偏航角,通过turtlebot2订阅navigation功能包中的odometry消息,得到偏航角信息。

4.根据权利要求1所述的一种基于深度相机和可见光通信的信标地图构建方法,其特征在于:所述步骤七中的观测函数是利用了当前工业相机的位姿以及灯具中心的世界坐标对某一位置的可见光定位的观测特征予以估计。

5.根据权利要求1所述的一种基于深度相机和可见光通信的信标地图构建方法,其特征在于:所述步骤七中用观测函数预估t时刻下的可见光定位的特征与实际观测的可见光定位的特征的误差构造成最小二乘问题,通过依次求解得到误差最小时的灯具中心的世界坐标以及LED灯光捕获装置的位姿。

6.根据权利要求5所述的一种基于深度相机和可见光通信的信标地图构建方法,其特征在于:所述最小二乘问题求解采用高斯牛顿迭代法,利用能观测到同一灯具的所有位姿对该灯具中心的世界坐标做出优化,再利用某一时刻下的位姿观测得到的灯具中心的世界坐标对该位姿进行优化。

7.根据权利要求1所述的一种基于深度相机和可见光通信的信标地图构建方法,其特征在于:所述步骤八中通过ICP执行的闭环相似检测包括计算两段轨迹之间的欧式变换矩阵;求出经过变换矩阵之后的一段位姿序列与另一段位姿序列之间匹配的欧式距离,阈值小于误差则完成闭环检测,并将其中一段位姿序列代替检测到闭环位姿序列。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学;广东光寻技术有限公司,未经华南理工大学;广东光寻技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111389612.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top