[发明专利]一种人眼左右眼图像联合的视线方向计算方法

摘要

本发明提供了一种人眼左右眼图像联合的视线方向计算方法，包括双眼信息的提取模型，输入人眼图像，通过双通道模型，分别自动的提取出图像中蕴含的左眼和右眼的信息特征；人眼联合信息特征的提取模型，输入用户的双眼图像，模型结合双眼信息，提取人眼的联合信息特征；发明了一种联合算法，通过输入特征信息，计算得到三维视线方向。本发明的应用之一是虚拟现实和人机交互，其原理是通过拍摄用户的眼部图像，计算用户视线方向，从而与智能系统界面或虚拟现实对象进行交互。本发明也可广泛用于训练培训、游戏娱乐、视频监控、医疗监护等领域。

主权项

一种人眼左右眼图像联合的视线方向计算方法,其特征在于，包含以下步骤：(1)拍摄用户面部图像，定位左眼或右眼区域，预处理人眼图像，实现对头部位置的修正，并得到固定像素大小的人眼图像；(2)建立双通道模型，分别输入人眼图像中左眼和右眼的图像信息，使用深度神经网络模型分别提取并输出左眼和右眼的信息特征；(3)建立单通道模型，输入左眼和右眼的图像信息，使用深度神经网络模型提取并输出左右眼图像联合信息特征；(4)使用回归分析的方法，结合左眼和右眼的信息特征及左右眼图像联合信息特征，并经过联合优化，预测双眼分别对应的三维视线方向；或者单独使用左眼和右眼的信息特征或左右眼图像联合信息特征，使用回归分析的方法，经过优化后，预测双眼分别对应的三维视线方向。