[发明专利]数据驱动的戴镜视线估计方法及装置在审
申请号: | 202210494729.3 | 申请日: | 2022-05-07 |
公开(公告)号: | CN115100727A | 公开(公告)日: | 2022-09-23 |
发明(设计)人: | 徐枫;吕军锋 | 申请(专利权)人: | 清华大学 |
主分类号: | G06V40/18 | 分类号: | G06V40/18;G06V40/16;G06V10/82;G06V10/774;G06T7/11;G06F3/01 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 黄德海 |
地址: | 100084*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 驱动 视线 估计 方法 装置 | ||
1.一种数据驱动的戴镜视线估计方法,其特征在于,包括以下步骤:
检测用户是否满足戴镜条件;
在检测到所述用户满足所述戴镜条件时,获取所述用户的实际眼镜度数;
根据所述实际眼镜度数计算对应的戴镜视线误差,并根据所述戴镜视线误差修正所述用户的视线估计值,得到所述用户的实际视线估计值。
2.根据权利要求1所述的方法,其特征在于,在根据所述戴镜视线误差修正所述用户的视线估计值之前,还包括:
采集所述用户的当前眼部区域图像;
获取所述用户的实际头部姿态。
3.根据权利要求2所述的方法,其特征在于,所述根据所述实际眼镜度数计算对应的戴镜视线误差,并根据所述戴镜视线误差修正所述用户的视线估计值,得到所述用户的实际视线估计值,包括:
基于预先构建的视线估计模型,根据眼镜度数与眼部区域图像及头部姿态之间的映射关系,得到所述实际眼镜度数对应的实际视线估计值。
4.根据权利要求3所述的方法,其特征在于,在得到所述用户的实际视线估计值之前,还包括:
获取学习用户的戴镜图像与不戴镜图像,并获取对应的头部姿态、视线方向、眼镜度数的真实标签,生成数据集;
基于所述戴镜图像与所述不戴镜图像进行人脸图像裁剪,分别得到第一人脸眼部区域图像和第二人脸眼部区域图像;
利用所述第一人脸眼部区域图像和第二人脸眼部区域图像和所述数据集,得到所述映射关系。
5.根据权利要求2所述的方法,其特征在于,还包括:
在检测到所述用户未满足所述戴镜条件时,根据所述当前眼部区域图像和所述实际头部姿态计算所述实际视线估计值。
6.一种数据驱动的戴镜视线估计装置,其特征在于,包括:
检测模块,用于检测用户是否满足戴镜条件;
度数获取模块,用于在检测到所述用户满足所述戴镜条件时,获取所述用户的实际眼镜度数;
估计模块,用于根据所述实际眼镜度数计算对应的戴镜视线误差,并根据所述戴镜视线误差修正所述用户的视线估计值,得到所述用户的实际视线估计值。
7.根据权利要求6所述的装置,其特征在于,还包括:
采集模块,用于采集所述用户的当前眼部区域图像;
姿态获取模块,用于获取所述用户的实际头部姿态。
8.根据权利要求7所述的装置,其特征在于,所述估计模块进一步用于,基于预先构建的视线估计模型,根据眼镜度数与眼部区域图像及头部姿态之间的映射关系,得到所述实际眼镜度数对应的实际视线估计值。
9.一种电子设备,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序,以实现如权利要求1-5任一项所述的数据驱动的戴镜视线估计方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行,以用于实现如权利要求1-5任一项所述的数据驱动的戴镜视线估计方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210494729.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置