[发明专利]一种增强现实设备的图像处理方法和增强现实设备在审
申请号: | 201910577995.0 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110310373A | 公开(公告)日: | 2019-10-08 |
发明(设计)人: | 崔利阳;孙建康;陈丽莉;张浩 | 申请(专利权)人: | 京东方科技集团股份有限公司;北京京东方光电科技有限公司 |
主分类号: | G06T19/00 | 分类号: | G06T19/00;G06T17/00;G06T7/70;G06K9/62;G06K9/00 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 解婷婷;曲鹏 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 增强现实 点云 注视 图像处理 目标点 人眼图像 初始点 残影 更新图像 运算负担 运算量 更新 人眼 去除 耗时 采集 | ||
1.一种增强现实设备的图像处理方法,其特征在于,包括:
采集人眼图像,并通过所述人眼图像获取人眼在初始点云中的注视范围;
对比位于所述注视范围内的更新点云与目标点云,以确定所述注视范围内的所述目标点云中是否包含残影;其中,所述更新点云为获取的更新图像在所述注视范围内的点云,所述目标点云为所述初始点云在所述注视范围内的点云。
2.根据权利要求1所述的增强现实设备的图像处理方法,其特征在于,所述通过所述人眼图像获取人眼在初始点云中的注视范围,包括:
通过所述人眼图像计算所述人眼的左、右瞳孔中心点的坐标;
根据已建立的人眼成像模型和所述左、右瞳孔中心点的坐标,计算所述左右瞳孔在虚拟成像面上的交点的坐标;
根据光学模组的左、右出瞳中心点的中心位置和所述交点的坐标,获取所述人眼在所述初始点云中的注视范围。
3.根据权利要求2所述的增强现实设备的图像处理方法,其特征在于,所述计算所述左右瞳孔在虚拟成像面上的交点坐标,包括:
将所述左、右瞳孔中心点的坐标代入所述人眼成像模型,计算出所述人眼在所述光学模组的左成像面上的左注视点的坐标和右成像面上的右注视点的坐标;
根据左注视线和右注视线在所述虚拟成像面上的交点,得到所述交点的坐标;其中,所述左注视线为通过左出瞳中心点和所述左成像面上的左注视点确定的,所述右注视线为通过右出瞳中心点和所述右成像面上的右注视点确定的。
4.根据权利要求2所述的增强现实设备的图像处理方法,其特征在于,所述获取人眼在初始点云中的注视范围,包括:
以所述左、右出瞳中心点的中心位置和所述交点的连线为轴线,以角度为顶角做视线圆锥,其中,所述左、右出瞳中心点的中心位置为所述视线圆锥的顶点,所述角度的初始值在15度到30度之间,所述视线圆锥为所述注视范围。
5.根据权利要求4所述的增强现实设备的图像处理方法,其特征在于,还包括:
通过所述光学模组实时采集所述更新图像;
将所述更新图像所形成的点云与所述视线圆锥进行匹配,获取所述点云位于所述视线圆锥内的更新点云;
将所述初始点云与所述视线圆锥进行匹配,获取所述初始点云位于所述视线圆锥内的所述目标点云。
6.根据权利要求5所述的增强现实设备的图像处理方法,其特征在于,
所述对比位于所述注视范围内的更新点云与目标点云,以确定所述注视范围内的所述目标点云中是否包含残影,包括:
计算所述左、右出瞳中心点的中心位置与所述更新点云中每个点的平均距离d2;
计算所述左、右出瞳中心点的中心位置与所述目标点云中每个点的平均距离d3;
根据所述d2和所述d3,确定所述视线圆锥内的目标点云是否包含残影。
7.根据权利要求6所述的增强现实设备的图像处理方法,其特征在于,所述根据所述d2和所述d3,确定注视范围内的目标点云中是否包含残影,包括:
在所述d2与s的乘积大于所述d3时,确定出所述注视范围内的所述目标点云中包含残影,其中,所述s为小于1的比例系数。
8.根据权利要求2~7中任一项所述的增强现实设备的图像处理方法,其特征在于,所述方法还包括:建立所述人眼成像模型;
所述建立所述人眼成像模型,包括:
在所述光学模组的虚拟成像面上选取X个注视点,第i个注视点所在虚拟成像面与坐标原点的距离为di,所述i为大于或等于1、且小于或等于X的正整数;
根据所述X个注视点的坐标,以及所述X个注视点在所述光学模组上的左右出瞳中心点,确定所述X个注视点在所述光学模组的左、右成像面上的X组成像坐标;
采集人眼注视所述X个注视点时的人眼图像,并获取人眼注视所述X个注视点的X组左、右瞳孔中心点的坐标;
根据所述X组成像坐标,所述X组左、右瞳孔中心点的坐标和成像标准模型,建立所述人眼成像模型,建立的所述人眼成像模型包括左眼成像模型和右眼成像模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司;北京京东方光电科技有限公司,未经京东方科技集团股份有限公司;北京京东方光电科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910577995.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:动态虚拟对象实现系统及方法
- 下一篇:全景照片中三脚架自动消除方法及装置