[发明专利]一种基于人脸多特征融合的智能电视用户疲劳检测系统及方法

摘要

本发明涉及一种基于人脸多特征融合的智能电视用户疲劳检测系统及方法。该系统基于智能电视应用，主要包括：疲劳检测设置模块，视频数据采集模块，人脸特征点提取模块，眼睛纵横比计算模块，眨眼检测模块，头部姿态检测模块，疲劳智能检测模块。通过眼睛纵横比变化判断单位时间内眨眼发生次数，通过头部姿态倾斜度判断嗜睡事件的发生以及单位时间内持续的时间长度，联合判决用户疲劳状态，并基于此系统提出一种实现方法，对智能电视使用场景中疲劳检测多维度特征进行了较为全面的多特征融合分析和联合决策，提升了疲劳识别的准确度，降低了误触发的概率。

主权项

1.一种基于人脸多特征融合的智能电视用户疲劳检测系统，包括疲劳检测设置模块，视频数据采集模块，人脸特征点提取模块，眼睛纵横比计算模块，眨眼检测模块，头部姿态检测模块，疲劳智能检测模块；所述疲劳检测设置模块，用于设置疲劳检测相关参数；所述视频数据采集模块，用于视频信号的采集；所述人脸特征点提取模块，用于获取来自视频数据采集模块提供的视频数据，进行人脸特征点检测；所述眼睛纵横比计算模块，用于在人脸特征点提取模块中提取的多个特征中选取关键的眼部特征点，计算眼睛纵横比；所述眨眼检测模块，用于获取眼睛纵横比计算模块中得出的眼睛纵横比，计算眼睛疲劳因子的数值，判断眨眼事件的发生；所述头部姿态检测模块，用于获取人脸特征点提取模块中提取的多个特征中关键眼部特征点的坐标，进行运算获取头部倾斜角度，判断睡姿事件的发生；所述疲劳智能检测模块,用于根据眨眼检测模块和头部姿态检测模块获取的全部特征，进行联合决策疲劳状态。