[发明专利]一种基于RGBD的汽车驾驶员状态检测和识别系统

摘要

本发明涉及光学技术及计算机技术领域公开了一种基于RGBD的汽车驾驶员状态检测和识别系统，包括：系统集成了RGB彩色图像传感器模块，飞行时间TOF的深度和灰度图像传感器模块，近红外发射器和微处理器等单元；通过TOF传感器获得的深度信息，并与对RGB彩色图像信息进行合成算法处理；对驾驶员身份和体态进行识别检测；对驾驶员在室内的驾驶状态进行检测；驾驶员对汽车操控的手势控制。本发明采用彩色图像传感器和深度图像传感器获取驾驶室内RGBD信息进而计算出彩色三维图像(R,G,B,X,Y,Z,C)的多重信息，对汽车室内驾驶员提供信息采集、安全驾驶和人机交互等辅助功能。

主权项

1.一种基于RGBD的汽车驾驶员状态检测和识别系统，其特征在于，包括：RGB(Red，Green，Blue)彩色图像传感器、TOF飞行时间传感器、近红外发射器和微处理器；所述近红外发射器向被检测人或物发射调制频率的近红外光线，波长在800nm至1000nm左右，调制频率在1MHz到100MHz；所述TOF飞行时间传感器感应被检测人或物表面发射回来的近红外光，通过对比调制光波的相位差计算出物体距离模块的深度图(depthdata)和反射光的强度图(confidencedata)；所述RGB彩色图像传感器通过感应物体发射回来的自然光或者近红外光对物体彩色的成像；所述微处理器具有图像数据接口、I2C和普通的输入输出口(I/O)，能够控制近红外发射器、向下一单元传递RGBD信息，以及对RGB彩色图像传感器和TOF飞行时间传感器传导过来的信号进行处理和整合，以实现对驾驶员身份、体态、驾驶状态和手势控制进行识别检测。