[发明专利]一种基于多模态数据的静默活体检测方法

摘要

本发明公开了一种基于多模态数据的静默活体检测方法，包括：(1)利用传感器采集人脸RGB图像、红外图像和深度图像，抠出三种原始图像中人脸区域图；(2)建立特征提取网络，利用特征提取网络对步骤1中人脸区域图进行特征提取，得到RGB图像、红外图像和深度图像的卷积特征图；(3)将步骤2中三个卷积特征图利用深度神经网络进行数据层面的融合，得到多模态融合特征图；(4)利用深度神经网络提取多模态融合特征图的特征向量；(5)对特征向量进行处理，输出活体分类的结果。本发明利用RGB图像、深度图像和红外图像三种模态数据对人脸进行活体检测，提高活体判别精度；将不同硬件的信息融合后提升活体判别效果。