[发明专利]基于单目标三维重建的工件快速识别与定位方法在审

专利信息
申请号: 201910199355.0 申请日: 2019-03-15
公开(公告)号: CN109948514A 公开(公告)日: 2019-06-28
发明(设计)人: 徐显兵;彭成斌;肖江剑;李现;张加焕 申请(专利权)人: 中国科学院宁波材料技术与工程研究所
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62;G06T17/00
代理公司: 南京利丰知识产权代理事务所(特殊普通合伙) 32256 代理人: 赵世发;王锋
地址: 315201 浙江*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 三维模型 训练集 三维重建 单目标 单帧图像 快速识别 抓取 目标检测算法 三维坐标系 准确度 点云格式 二维图片 算法应用 图像输入 图像注释 训练图像 对象类 鲁棒性 放入 权重 体素 匹配 装配 标签 相机 渲染 测试 保存 重建 转化 网络 图片
【权利要求书】:

1.一种基于单目标三维重建的工件快速识别与定位方法,其特征在于包括如下步骤:

a)渲染工件三维模型,获取工件在设定三维坐标系中不同角度的图片作为训练图像,扩充训练集,将点云格式的三维模型转化为体素格式放入训练集;

b)将二维图片与相应的三维模型进行匹配作为训练集;

c)将所述训练集内的图像输入训练网络进行训练;

d)训练完成后,保存权重,输入获取的单帧图像进行测试,重建出整个三维模型。

2.根据权利要求1所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于,步骤a)包括:将每一幅所述训练图像按照使工件绕所述设定三维坐标系的X、Y、Z轴旋转的角度进行标注,进行制作训练集。

3.根据权利要求2所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于,步骤a)包括:定义选定姿势为参考取值,对应于该选定姿势,工件绕所述设定三维坐标系中X、Y、Z轴旋转的角度都为0°;以及,获取工件绕X轴、Y轴旋转-15°~14°以及绕Z轴旋转0°~90°的图片作为训练图像。

4.根据权利要求1所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于,步骤c)包括:

i、设置训练网络,所述训练网络包括编码器、核心模块和解码器;

ii、将编码器提取到的特征输入到核心模块中进行学习;

iii、基于损失函数对训练变量进行优化,得到测试结果。

5.根据权利要求4所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于:所述核心模块表述为:

ft=σ(WfT(xt)+Uf*ht-1+bf) 1)

it=σ(WiT(xt)+Ui*ht-1+bi) 2)

ht=tanh(st) 4)

其中,it和ft分别表示输入流和输出流,st和ht分别表示记忆单元和隐藏层,x为输入图像,T(x)为低维特征,*为卷积操作。

6.根据权利要求4所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于:所述损失函数表述为:

式5)中(i,j,k)为每个体素的位置,其最终输出满足伯努利分布[1-p(i,j,k),p(i,j,k)],y(i,j,k)为每个体素对应的训练样本真实值。

7.根据权利要求4所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于,所述编码器采用带有残差网络的CNN网络结构。

8.根据权利要求1所述的基于单目标三维重建的工件快速识别与定位方法,其特征在于,所述步骤d)包括:保存训练好的权重后,输入单帧图片,输出与之对应的三维模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院宁波材料技术与工程研究所,未经中国科学院宁波材料技术与工程研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910199355.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top