[发明专利]视线追踪及训练方法和装置、系统、电子设备和存储介质有效
申请号: | 201710384723.X | 申请日: | 2017-05-26 |
公开(公告)号: | CN108229284B | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 钱晨;王飞 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62;G06F3/01 |
代理公司: | 北京思源智汇知识产权代理有限公司 11657 | 代理人: | 毛丽琴 |
地址: | 100084 北京市海淀区中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明实施例公开了一种视线追踪及训练方法和装置、系统、电子设备和存储介质,其中,训练方法包括:利用第一神经网络获取至少一个样本图像中的眼珠转角预估信息,利用第二神经网络获取至少一个样本图像中的头部姿态预估信息;其中,样本图像标注有视线方向标注信息;分别针对任一样本图像,根据眼珠转角预估信息和头部姿态预估信息计算视线方向预估信息;基于至少一个样本图像的视线方向预估信息和视线方向标注信息,对第一神经网络和第二神经网络进行训练。本发明实施例避免了过拟合问题,可以准确地估计视线方向,消除了使用脸部关键点计算眼珠转角和头部姿态的歧义性导致视线估计不准确的问题,对于不同人和不同表情都有更好的鲁棒性。 | ||
搜索关键词: | 视线 追踪 训练 方法 装置 系统 电子设备 存储 介质 | ||
【主权项】:
1.一种视线追踪神经网络的训练方法,其特征在于,包括:利用第一神经网络获取至少一个样本图像中的眼珠转角预估信息,利用第二神经网络获取所述至少一个样本图像中的头部姿态预估信息;其中,所述样本图像标注有视线方向标注信息;分别针对所述至少一个样本图像中的任一样本图像,根据所述任一样本图像的眼珠转角预估信息和头部姿态预估信息,计算视线方向预估信息;基于所述至少一个样本图像的所述视线方向预估信息和所述视线方向标注信息,对所述第一神经网络和所述第二神经网络进行训练。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710384723.X/,转载请声明来源钻瓜专利网。