[发明专利]钢板角点与边点定位方法和工件抓取方法及生产线

权利要求书

1.一种钢板角点与边点定位方法，其特征在于，包括以下步骤：

针对特定场景设计对应的角点与边点检测的学习网络；

将预设人工合成的场景图片数据放到学习网络中进行训练，以反向传播优化参数，生成精确预训练模型；

获取真实场景的角点图片和边点图片，并将真实场景的图片数据放到学习网络中进行训练，由精确预训练模型生成最终检测模型；

所述针对特定场景设计对应的角点与边点检测的学习网络的步骤包括：

特征提取模块通过卷积模块提取自下而上和自上而下的特征，将两种特征相结合，将结合后的特征再次使用卷积运算，消除混叠效应；

区域提名模块训练一个粗的潜在目标区域提名模块，以便初步定位出大致的目标区域；

最终预测模块通过训练一个卷积与全连接相结合的网络，进一步精确的预测角点与边点的具体位置；

将特征提取模块、区域提名模块以及最终预测模块进行端到端的整体训练，在预测时则三个模块串联使用。

2.如权利要求1所述的钢板角点与边点定位方法，其特征在于，在将预设人工合成的场景图片数据放到学习网络中进行训练，以反向传播优化参数，生成精确预训练模型的步骤之前还包括：

将学习网络在目前公开的数据集上进行预训练，生成预训练模型。

3.如权利要求1或2所述的钢板角点与边点定位方法，其特征在于，人工合成场景图片数据的步骤包括：

获取相机所拍摄的场景图片；

根据场景图片，人工合成若干的合成图片；

对合成图片进行角点或者边点进行标注。

4.如权利要求3所述的钢板角点与边点定位方法，其特征在于，根据场景图片，人工合成若干的合成图片的步骤包括：

根据第一光照强度和第一光照角度生成第一合成图片；

根据第二光照强度和第二光照角度生成第二合成图片；

根据第三光照强度和第三光照角度生成第三合成图片；

其中，第一光照强度大于第二光照强度，且小于第三光照强度；

第一光照角度大于第二光照角度，且小于第三光照角度。

5.如权利要求4所述的钢板角点与边点定位方法，其特征在于，根据不同的工作场景，人工合成若干的合成图片的步骤还包括：

根据第四光照强度和第四光照角度生成第四合成图片；

根据第五光照强度和第五光照角度生成第五合成图片；

其中，第一光照强度大于第五光照强度，且小于第四光照强度；

第一光照角度小于第五光照角度，且大于第四光照角度。

6.如权利要求1或2所述的钢板角点与边点定位方法，其特征在于，生成真实场景的角点图片和边点图片的步骤包括：

采集若干真实角点图片和边点图片；

在角点图片上标注对应的角点，在边点图片上标注对应的边点。

7.如权利要求1或2所述的钢板角点与边点定位方法，其特征在于，在对模型进行训练之前，将模型预加载至显存中，以提高调取和训练速度。

8.一种工件抓取方法，其特征在于，包括如权利要求1至7中任意一项所述的钢板角点与边点定位方法。

9.一种工件生产线，其特征在于，使用如权利要求8中所述的工件抓取方法。