[发明专利]一种高效快速的双目3D点云焊点缺陷检测方法在审
申请号: | 202111262163.3 | 申请日: | 2021-10-28 |
公开(公告)号: | CN114092411A | 公开(公告)日: | 2022-02-25 |
发明(设计)人: | 郝矿荣;胡启明;李海剑;隗兵;张平;唐妙奇 | 申请(专利权)人: | 东华大学 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06T7/11;G06V10/774;G06V10/44;G06V10/764;G06V10/82;G01N21/956 |
代理公司: | 上海统摄知识产权代理事务所(普通合伙) 31303 | 代理人: | 杜亚 |
地址: | 201620 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 高效 快速 双目 点云焊 点缺陷 检测 方法 | ||
1.一种高效快速的双目3D点云焊点缺陷检测方法,其特征是步骤如下:
(1)构建双目视觉系统,采集待测样本的3D点云;
所述待测样本为塑料材质封装的印刷电路板;
所述双目视觉系统是指:两个三角测距激光雷达位于所述待测样本的正上方,且二者形成的直线与所述待测样本的印刷电路板部分所在的平面平行;两个三角测距激光雷达以镜像对称的方式放置;每个三角测距激光雷达在沿着所述直线的方向运动时,所述三角测距激光雷达的发射器发射的激光垂直扫描过焊点,然后由焊点反射激光至对应三角测距激光雷达的接收器;
所述采集的过程为:使用逻辑控制器控制两个三角测距激光雷达的开始扫描信号,并同时控制两个三角测距激光雷达在所述直线上匀速运动,沿一个方向一次性采集待测样本的3D点云;
所述匀速运动过程中,两个三角测距激光雷达的相对位置保持不变;
所述待测样本的3D点云由视图1形成的3D点云和视图2形成的3D点云组成;
(2)采用3D模板匹配方法定位焊点位置:先采用语义分割方法对视图1形成的3D点云和视图2形成的3D点云进行分割,得到视图1中印刷电路板部分的3D点云,记为Y1,视图2中印刷电路板部分的3D点云,记为Y2;再采用齐次坐标变换将Y2与Y1对齐,得到与Y1对齐的视图2的印刷电路板部分的3D点云,记为最后使用快速点特征直方图将Y1或者与标准模板配准获取每个焊点的位置信息;通过所述焊点的位置信息获取Y1和中属于各个焊点的点云,分别记为记为Z1和Z2;
(3)基于细粒度方法逐个检测步骤(2)中Z1和Z2中对应焊点是否为合格焊点;
所述焊点的3D点云包括X1和X2;其中,X1为该焊点在Z1中的3D点云,X2为该焊点在Z2中的3D点云;
所述检测的过程为:
(3.1)先使用深度神经网络分别对该焊点的X1和X2进行点云到点特征的变换得到X1和X2的点特征,再使用对称函数保持输入的置换不变性对X1和X2点特征进行处理,得到X1和X2的全局特征;所述X1和X2的全局特征,表示如下:
f(X1)≈g(m(X1));
f(X2)≈g(m(X2));
其中,f(X1)和f(X2)分别为X1和X2的全局特征,g(·)为对称函数,m(·)为点云到点特征的变换;
(3.2)通过f(X1)和f(X2)确定该焊点的关键区域,并得到所述关键区域内X1和X2的点特征和所述关键区域是对该焊点的顶部对应的球形区域采用指数函数进行切割得到;
(3.3)使用步骤(3.2)所得关键区域内X1和X2的点特征和作为分类器多层感知机的输入,预测该焊点属于合格焊点的概率,其数学表达式如下:
其中,p(·)指该焊点属于合格焊点的概率,cls(·)指分类器多层感知机;
如果p(X1,X2)0.5则认为该焊点为合格焊点。
2.根据权利要求1所述的一种高效快速的双目3D点云焊点缺陷检测方法,其特征在于,所述控制两个三角测距激光雷达的开始扫描信号是指:当三角测距激光雷达的激光能够扫描到待测样本时,启动开始扫描信号,当三角测距激光雷达的激光不再扫描到待测样本时,停止开始扫描信号。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东华大学,未经东华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111262163.3/1.html,转载请声明来源钻瓜专利网。