[发明专利]一种AR眼镜的图像获取方法及系统在审
申请号: | 202110961749.2 | 申请日: | 2021-08-20 |
公开(公告)号: | CN113676721A | 公开(公告)日: | 2021-11-19 |
发明(设计)人: | 张晓峰;王青峰;邱小锋 | 申请(专利权)人: | 融信信息科技有限公司 |
主分类号: | H04N13/383 | 分类号: | H04N13/383;H04N13/122;G06T7/11;G06T7/50;G06T19/00 |
代理公司: | 安徽思沃达知识产权代理有限公司 34220 | 代理人: | 赵晶莹 |
地址: | 200125 上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 ar 眼镜 图像 获取 方法 系统 | ||
1.一种AR眼镜的图像获取方法,其特征在于,该AR眼镜的图像获取方法具体步骤如下:
(1)确定景深分布图像:通过AR眼镜内侧朝向用户眼球的红外设备捕捉用户的瞳孔缩放程度,再根据眼球追踪技术确定用户眼球的真实注视点,再根据这个真实注视点调节景深摄像装置的焦点,从而得到景深分布图像;
(2)确定现实物品尺寸:通过摄像头获取AR眼镜前方的现实环境图像,并依据景深分布图像得到现实环境图像中现实物品的轮廓,从而依据现实物品的轮廓分割得到现实物品的图像,再根据焦距和像素计算现实物品的尺寸;
(3)修正虚拟物体尺寸:通过AR眼镜上的数据接口导入虚拟数据,并解析虚拟数据形成虚拟图像,再依靠深度学习模型分析虚拟图像中的逻辑过程,并依据逻辑过程依次获取虚拟图像中的物体,生成虚拟物体尺寸,再将虚拟物体尺寸与现实物品尺寸对比,产生对比差,再依据对比差修正虚拟物体尺寸,生成覆盖虚拟物体;
(4)确定现实环境图像中的覆盖点:确定虚拟图像中的物体位置,生成预覆盖位置,再确定现实环境图像中的现实物品位置,计算预覆盖位置与现实物品位置的相似度值,选取最大相似度值所对应的现实物品位置,即为覆盖点;
(5)形成目的图像:步骤(4)结束后,分割覆盖点处的现实物体,再将覆盖虚拟物体填充至覆盖点,并修复填充后的现实环境图像,即生成目的图像。
2.根据权利要求1所述的一种AR眼镜的图像获取方法,其特征在于,步骤(2)中所述轮廓是景深分布图像中属于不同景深的区域之间的分界线,所述分界线与现实物品的边缘重叠。
3.根据权利要求1所述的一种AR眼镜的图像获取方法,其特征在于,步骤(4)中所述计算预覆盖位置与现实物品位置的相似度值采用相似性度量算法,即ROST SEAT算法。
4.根据权利要求1所述的一种AR眼镜的图像获取方法,其特征在于,步骤(5)中所述修复填充后的现实环境图像采用破损照片修复技术。
5.一种AR眼镜的图像获取系统,其特征在于,包括摄像模块、图像处理模块、尺寸获取模块、数据导入模块、深度学习模块、数据处理模块、对比模块、覆盖成像模块和显示模块;
其中,所述摄像模块与图像处理模块通信连接;所述数据导入模块与深度学习模块通过Wifi连接。
6.根据权利要求5所述的一种AR眼镜的图像获取系统,其特征在于,所述摄像模块用于拍摄AR眼镜前方的现实环境图像和景深分布图像,并将现实环境图像和景深分布图像发送至图像处理模块;所述图像处理模块用于处理景深分布图像,生成现实物品的轮廓,并将现实物品的轮廓发送至尺寸获取模块;所述尺寸获取模块用于获取现实物品尺寸,并发送至对比模块;其中获取现实物品尺寸的具体操作为:
S1、根据现实物品的轮廓从现实环境图像中分割得到现实物品图像;
S2、根据焦距和像素计算现实物品的尺寸。
7.根据权利要求5所述的一种AR眼镜的图像获取系统,其特征在于,所述数据导入模块用于导入虚拟数据,并发送至深度学习模块;所述深度学习模块用于识别虚拟数据,生成识别结果,并发送至数据处理模块;所述数据处理模块用于处理识别结果,生成虚拟物体尺寸,并发送至对比模块;所述对比模块用于对比虚拟物体尺寸和现实物品尺寸,得到对比差,并根据对比差调整虚拟物体的尺寸,生成覆盖虚拟物体;所述覆盖成像模块用于覆盖现实环境图像,生成目的图像,并发送至显示模块;其中,形成目的图像的具体操作为:
SS1、接收覆盖虚拟物体,并提取覆盖虚拟物体在虚拟数据中的位置;
SS2、根据覆盖虚拟物体在虚拟数据中的位置确定现实环境图像中的覆盖点;
SS3、将覆盖点处的现实物体分割删除,再将覆盖虚拟物体填充;
SS4、修复填充后的现实环境图像,即得目的图像;
所述显示模块用于显示目的图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于融信信息科技有限公司,未经融信信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110961749.2/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序