[发明专利]深度图像估计方法、装置、电器设备以及存储介质在审
| 申请号: | 202211139525.4 | 申请日: | 2022-09-19 |
| 公开(公告)号: | CN115423719A | 公开(公告)日: | 2022-12-02 |
| 发明(设计)人: | 蔡中印 | 申请(专利权)人: | 深圳市杉川机器人有限公司 |
| 主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T7/10;G06N3/04;G06N3/08 |
| 代理公司: | 北京励诚知识产权代理有限公司 11647 | 代理人: | 刘雅婷 |
| 地址: | 518057 广东省深圳市南山区西丽街*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 深度 图像 估计 方法 装置 电器设备 以及 存储 介质 | ||
1.一种深度图像估计方法,其特征在于,应用于嵌入式神经网络处理器,所述方法包括:
获取双目相机采集到的第一图像和第二图像;
分别对所述第一图像和所述第二图像的有效区域进行截取,得到第一有效图像和第二有效图像;
利用预先训练好的轻量级图像校正网络模型对所述第一有效图像的行和所述第二有效图像的行进行对准校正,得到第一校正图像和第二校正图像;
利用预先训练好的轻量级深度估计网络模型对所述第一校正图像和所述第二校正图像进行深度估计,得到深度图像。
2.根据权利要求1所述的方法,其特征在于,获取双目相机采集到的第一图像和第二图像之前,所述方法还包括:
分别对预先训练好的图像校正网络模型和深度估计网络模型进行网络剪裁,获得轻量级图像校正网络模型和轻量级深度估计网络模型。
3.根据权利要求2所述的方法,其特征在于,在获得轻量级图像校正网络模型和轻量级深度估计网络模型之后,所述方法还包括:
利用第一目标样本集对所述轻量级图像校正网络模型进行训练,获得预先训练好的轻量级图像校正网络模型,其中,所述第一目标样本集包括由所述第一有效图像和第二有效图像组成的多个有效图像组、第一目标校正图像和第二目标校正图像,所述第一目标校正图像和第二目标校正图像通过预先训练好的图像校正网络模型获得;
利用第二目标样本集对所述轻量级深度估计网络模型进行训练,获得预先训练好的轻量级深度估计网络模型,其中,所述第二目标样本集包括由所述第一校正图像和第二校正图像组成的多个校正图像组、目标深度图像,所述目标深度图像根据所述第一图像与所述第二图像之间的视差图进行深度估计得到。
4.根据权利要求3所述的方法,其特征在于,利用第一目标样本集对所述轻量级图像校正网络模型进行训练,包括:
以所述多个有效图像组为输入、所述第一目标校正图像和第二目标校正图像为图像校正标签,对所述轻量级图像校正网络模型的参数进行训练,直至所述轻量级图像校正网络模型输出的图像校正结果与所述图像校正标签之间的误差满足第一预设误差条件。
5.根据权利要求3所述的方法,其特征在于,利用第二目标样本集对所述轻量级深度估计网络模型进行训练,包括:
以所述多个校正图像组为输入、所述目标深度图像为深度图像标签,对所述轻量级深度估计网络模型的参数进行训练,直至所述轻量级深度估计网络模型输出的深度图像估计结果与所述深度图像标签之间的误差满足第二预设误差条件。
6.根据权利要求3所述的方法,其特征在于,在对所述轻量级图像校正网络模型和所述轻量级深度估计网络模型进行训练之后,所述方法还包括:
分别对训练好的轻量级图像校正网络模型和轻量级深度估计网络模型进行模型格式转换,以使转换后的轻量级图像校正网络模型和轻量级深度估计网络模型适于在所述嵌入式神经网络处理器上运行。
7.根据权利要求6所述的方法,其特征在于,在分别对训练好的轻量级图像校正网络模型和轻量级深度估计网络模型进行模型格式转换之前,所述方法还包括:
对训练好的轻量级图像校正网络模型和轻量级深度估计网络模型的模型参数进行int8量化处理。
8.根据权利要求1-7中任一项所述的方法,其特征在于,分别对所述第一图像和所述第二图像的有效区域进行截取,包括:
确定所述有效区域的边界坐标;
从所述第一图像和所述第二图像中截取所述边界坐标的连线框定的区域,以得到所述第一有效图像和第二有效图像,其中,所述边界坐标的连线框定的区域为所述有效区域。
9.一种计算机可读存储介质,其特征在于,其上存储有深度图像估计程序,该深度图像估计方法被处理器执行时实现根据权利要求1-8中任一项所述的深度图像估计方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市杉川机器人有限公司,未经深圳市杉川机器人有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211139525.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:内存管理方法、装置、内存管理器、设备及存储介质
- 下一篇:LLC谐振变换器
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





