[发明专利]深度图像估计方法、装置、电器设备以及存储介质在审

专利信息
申请号: 202211139525.4 申请日: 2022-09-19
公开(公告)号: CN115423719A 公开(公告)日: 2022-12-02
发明(设计)人: 蔡中印 申请(专利权)人: 深圳市杉川机器人有限公司
主分类号: G06T5/00 分类号: G06T5/00;G06T7/10;G06N3/04;G06N3/08
代理公司: 北京励诚知识产权代理有限公司 11647 代理人: 刘雅婷
地址: 518057 广东省深圳市南山区西丽街*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 深度 图像 估计 方法 装置 电器设备 以及 存储 介质
【权利要求书】:

1.一种深度图像估计方法,其特征在于,应用于嵌入式神经网络处理器,所述方法包括:

获取双目相机采集到的第一图像和第二图像;

分别对所述第一图像和所述第二图像的有效区域进行截取,得到第一有效图像和第二有效图像;

利用预先训练好的轻量级图像校正网络模型对所述第一有效图像的行和所述第二有效图像的行进行对准校正,得到第一校正图像和第二校正图像;

利用预先训练好的轻量级深度估计网络模型对所述第一校正图像和所述第二校正图像进行深度估计,得到深度图像。

2.根据权利要求1所述的方法,其特征在于,获取双目相机采集到的第一图像和第二图像之前,所述方法还包括:

分别对预先训练好的图像校正网络模型和深度估计网络模型进行网络剪裁,获得轻量级图像校正网络模型和轻量级深度估计网络模型。

3.根据权利要求2所述的方法,其特征在于,在获得轻量级图像校正网络模型和轻量级深度估计网络模型之后,所述方法还包括:

利用第一目标样本集对所述轻量级图像校正网络模型进行训练,获得预先训练好的轻量级图像校正网络模型,其中,所述第一目标样本集包括由所述第一有效图像和第二有效图像组成的多个有效图像组、第一目标校正图像和第二目标校正图像,所述第一目标校正图像和第二目标校正图像通过预先训练好的图像校正网络模型获得;

利用第二目标样本集对所述轻量级深度估计网络模型进行训练,获得预先训练好的轻量级深度估计网络模型,其中,所述第二目标样本集包括由所述第一校正图像和第二校正图像组成的多个校正图像组、目标深度图像,所述目标深度图像根据所述第一图像与所述第二图像之间的视差图进行深度估计得到。

4.根据权利要求3所述的方法,其特征在于,利用第一目标样本集对所述轻量级图像校正网络模型进行训练,包括:

以所述多个有效图像组为输入、所述第一目标校正图像和第二目标校正图像为图像校正标签,对所述轻量级图像校正网络模型的参数进行训练,直至所述轻量级图像校正网络模型输出的图像校正结果与所述图像校正标签之间的误差满足第一预设误差条件。

5.根据权利要求3所述的方法,其特征在于,利用第二目标样本集对所述轻量级深度估计网络模型进行训练,包括:

以所述多个校正图像组为输入、所述目标深度图像为深度图像标签,对所述轻量级深度估计网络模型的参数进行训练,直至所述轻量级深度估计网络模型输出的深度图像估计结果与所述深度图像标签之间的误差满足第二预设误差条件。

6.根据权利要求3所述的方法,其特征在于,在对所述轻量级图像校正网络模型和所述轻量级深度估计网络模型进行训练之后,所述方法还包括:

分别对训练好的轻量级图像校正网络模型和轻量级深度估计网络模型进行模型格式转换,以使转换后的轻量级图像校正网络模型和轻量级深度估计网络模型适于在所述嵌入式神经网络处理器上运行。

7.根据权利要求6所述的方法,其特征在于,在分别对训练好的轻量级图像校正网络模型和轻量级深度估计网络模型进行模型格式转换之前,所述方法还包括:

对训练好的轻量级图像校正网络模型和轻量级深度估计网络模型的模型参数进行int8量化处理。

8.根据权利要求1-7中任一项所述的方法,其特征在于,分别对所述第一图像和所述第二图像的有效区域进行截取,包括:

确定所述有效区域的边界坐标;

从所述第一图像和所述第二图像中截取所述边界坐标的连线框定的区域,以得到所述第一有效图像和第二有效图像,其中,所述边界坐标的连线框定的区域为所述有效区域。

9.一种计算机可读存储介质,其特征在于,其上存储有深度图像估计程序,该深度图像估计方法被处理器执行时实现根据权利要求1-8中任一项所述的深度图像估计方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市杉川机器人有限公司,未经深圳市杉川机器人有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202211139525.4/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top