[发明专利]一种适用于触控的视线交互方法

摘要

本发明公开了一种适用于触控的视线交互方法，属于视频、多媒体信号处理技术领域。此方法将人眼区域图像输入到CNN中，通过卷积和下采样操作对图像进行特征提取和维度降低，改善了传统视线估计方法采用高清相机和外加红外设备构建眼球模型的局限性。图像采集阶段，通过对不同个体在不同位置不同时间的图像采集使得人眼数据库具备光照、肤色及形态的多样性，使得系统满足不同个体多种条件的要求。极大程度上提高了分类的准确性。

主权项

一种适用于触控的视线交互方法，其特征在于：将不同个体在不同外部条件下注视同一屏幕位置块的若干人眼图像归为一类，用卷积神经网络CNN实现模式分类，从而通过人眼图像识别其对应的屏幕注视位置块，该方法包括如下步骤：(1)人眼数据库的建立：在不同光照、不同时间、不同位置条件下对多个个体注视屏幕上随机出现的注视点的过程进行数据采集，对采集的图像进行人脸检测和人眼检测，获得人眼区域图像，建立人眼数据库并对人眼图像进行筛选；(2)将人眼图像分为训练集和验证集，作为卷积神经网络的输入，根据实际应用需求对电脑屏幕进行分块，注视屏幕上同一分块的人眼图像视为一类，对人眼图像进行分类，训练卷积神经网络；(3)进行视线估计时，将待分类人眼图像输入到训练好的卷积神经网络模型中，即可判断其类别，并对应得到相应的屏幕注视位置块，从而对视线方向进行估计。