[发明专利]一种视线跟踪方法及用于执行所述方法的终端在审
申请号: | 201980001858.0 | 申请日: | 2019-03-08 |
公开(公告)号: | CN110546596A | 公开(公告)日: | 2019-12-06 |
发明(设计)人: | 石胤赞;李泰喜 | 申请(专利权)人: | 视信有限责任公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F3/00;G06K9/00;G06N20/00 |
代理公司: | 51258 成都超凡明远知识产权代理有限公司 | 代理人: | 金相允;梁香美<国际申请>=PCT/KR |
地址: | 韩国*** | 国省代码: | 韩国;KR |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视线跟踪 视线信息 面部图像 视线 终端 数据传输单元 数据收集单元 位置信息传输 服务器接收 接收单元 拍摄设备 学习数据 终端屏幕 跟踪 服务器 指向 学习 | ||
1.一种用于基于累积与视线信息相关的多个学习数据的第一视线跟踪模型来跟踪视线的终端,其中,包括:
数据收集单元,用于使用拍摄设备获取用户的面部图像,并从所述面部图像中提取所述用户的视线信息;
数据传输单元,用于将所述用户的视线信息和所述终端屏幕中所述用户的视线指向的地点的位置信息传输给服务器;
模型接收单元,用于从所述服务器接收在所述第一视线跟踪模型中学习了所述用户的视线信息和所述位置信息的第二视线跟踪模型;以及
视线跟踪单元,用于使用所述第二视线跟踪模型来跟踪所述用户的视线。
2.如权利要求1所述的终端,其中,
所述第二视线跟踪模型通过以下方式来生成:分别对所述累积的学习数据与所述用户的视线信息及所述位置信息分配预设的彼此不同的权重并进行学习,并将所述分配权重的学习数据与所述用户的视线信息及所述位置信息输入到第一视线跟踪模型。
3.如权利要求1所述的终端,其中,
所述第二视线跟踪模型基于每个用户而不同。
4.如权利要求1所述的终端,其中,
应用所述用户的视线信息和所述位置信息的所述第一视线跟踪模型或所述第二视线跟踪模型从所述服务器分发到另一终端。
5.如权利要求1所述的终端,其中,
当所述用户凝视设置在所述终端屏幕中的多个地点时,所述数据收集单元从在凝视各个地点时拍摄的所述用户的各个面部图像中提取所述用户的视线信息,
所述数据传输单元将所述用户的视线信息和所述各个地点的位置信息传输给所述服务器。
6.如权利要求5所述的终端,其中,
当从凝视所述屏幕中所述地点的用户接收设定动作的输入时,所述数据收集单元判断接收所述动作输入的时间点作为所述用户凝视所述地点的时间点。
7.如权利要求6所述的终端,其中,
接收所述动作输入的时间点包括所述用户触摸所述地点的时间点、和所述用户随着在所述地点处显示设定的短语而发出语音时所述语音开始发出的时间点中的至少一个。
8.一种由用于基于累积与视线信息相关的多个学习数据的第一视线跟踪模型来跟踪视线的终端执行的视线跟踪方法,其中,包括:
使用拍摄设备获取用户的面部图像;
从所述面部图像中提取所述用户的视线信息;
将所述用户的视线信息和所述终端屏幕中所述用户的视线指向的地点的位置信息传输给服务器;
从所述服务器接收在所述第一视线跟踪模型中学习了所述用户的视线信息和所述位置信息的第二视线跟踪模型;以及
使用所述第二视线跟踪模型来跟踪所述用户的视线。
9.如权利要求8所述的视线跟踪方法,其中,
所述第二视线跟踪模型通过以下方式来生成:分别对所述累积的学习数据与所述用户的视线信息及所述位置信息赋予预设的彼此不同的权重并进行学习,并将所述赋予权重的学习数据与所述用户的视线信息及所述位置信息输入到第一视线跟踪模型。
10.如权利要求8所述的视线跟踪方法,其中,所述第二视线跟踪模型基于每个用户而不同。
11.如权利要求8所述的视线跟踪方法,其中,
应用所述用户的视线信息和所述位置信息的所述第一视线跟踪模型或所述第二视线跟踪模型从所述服务器分发到另一终端。
12.如权利要求8所述的视线跟踪方法,其中,
在所述提取的步骤中,当所述用户凝视设置在所述终端屏幕中的多个地点时,从在凝视各个地点时拍摄的所述用户的各个面部图像中提取所述用户的视线信息,
在所述传输的步骤中,将所述用户的视线信息和所述各个地点的位置信息传输给所述服务器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于视信有限责任公司,未经视信有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201980001858.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:导航全息图像
- 下一篇:使用电容式触控板的手持控制器