[发明专利]眼睛跟踪延迟增强

权利要求书

1.一种头戴式系统，包括：

相机，其被配置为捕获用户的眼睛的图像；

一个或多个光源，其被配置为照射所述用户的所述眼睛，以使得亮斑被表示在所述用户的所述眼睛的图像中；以及

一个或多个处理器，其被配置为：

从所述相机获得所述用户的所述眼睛的第一图像；

将所述第一图像作为输入提供给机器学习模型，所述机器学习模型已经被训练为在给定眼睛的图像的情况下生成虹膜片段数据和瞳孔片段数据；

在所述第一图像之后从所述相机获得所述用户的所述眼睛的第二图像；

基于所述虹膜片段数据，在所述第二图像中检测一个或多个亮斑被表示的一组一个或多个位置；

基于所述瞳孔片段数据，识别所述第二图像的所述用户的所述眼睛的瞳孔被表示的区域；以及

至少部分地基于在所述第二图像中所检测的一组一个或多个亮斑位置和所识别的所述第二图像的区域，确定所述用户的所述眼睛的姿势。

2.根据权利要求1所述的系统，其中，所述一个或多个处理器进一步被配置为：

经由所述机器学习模型获得用于所述第二图像的虹膜片段数据和瞳孔片段数据；

从所述相机获得所述用户的所述眼睛的第三图像；

基于由所述机器学习模型针对所述第二图像生成的所述虹膜片段数据，在所述第三图像中分别检测显示一个或多个亮斑的一组一个或多个位置；

基于由所述机器学习模型针对所述第二图像生成的所述瞳孔片段数据，识别在所述第三图像中的所述用户的所述眼睛的瞳孔被表示的区域；以及

至少部分地基于在所述第三图像中所检测的一组一个或多个亮斑位置和所识别的所述第三图像的区域，确定所述用户的所述眼睛的姿势。

3.根据权利要求1所述的系统，其中，所述一个或多个处理器进一步被配置为：

基于所述虹膜片段数据，识别所述第二图像的第二区域，以及

其中，为了在所述第二图像中检测显示一个或多个亮斑的所述一组一个或多个位置，所述一个或多个处理器被配置为：

在所述第二图像的所述第二区域中搜索在所述第二区域中表现出局部最大值强度值的各个位置。

4.根据权利要求3所述的系统，其中，所述一个或多个处理器进一步被配置为：

抑制在所述第二图像的所述特定区域之外的区域中搜索显示一个或多个亮斑的一组一个或多个位置。

5.根据权利要求3所述的系统，其中，所述一个或多个处理器进一步被配置为：

基于所述虹膜片段数据，在所述第一图像中识别所述用户的所述眼睛的虹膜的轮廓，以及

其中，为了基于所述虹膜片段数据，识别所述第二图像的不同区域，所述一个或多个处理器被配置为：

基于在所述第一图像中所识别的所述用户的所述眼睛的虹膜的轮廓，识别所述第二图像的第三区域。

6.根据权利要求1所述的系统，其中，所述一个或多个处理器进一步被配置为：

基于所述瞳孔片段数据，在所述第一图像中识别所述用户的所述眼睛的瞳孔的质心，以及

其中，为了识别所述第二图像的所述区域，所述一个或多个处理器被配置为：

基于在所述第一图像中所识别的所述用户的所述眼睛的瞳孔的质心，识别所述用户的所述眼睛的瞳孔被表示的所述第二图像的第二区域。

7.根据权利要求6所述的系统，其中，为了识别所述第二图像的所述第二区域，所述一个或多个处理器被配置为：

基于在所述第一图像中所识别的所述用户的所述眼睛的瞳孔的质心，识别在所述第二图像内的位置；以及

从在所述第二图像内所识别的所述位置开始搜索瞳孔边界。

8.根据权利要求7所述的系统，其中，为了从在所述第二图像内所识别的所述位置开始搜索瞳孔边界，所述一个或多个处理器被配置为：

基于在所述第二图像内所识别的位置被指定为起点，执行星爆瞳孔检测过程。