[发明专利]用基于深度的跟踪来生成和更新数据库的自学习面部识别

权利要求书

1.一种用于为被检测为位于环境中的每个人生成面部识别训练数据库的计算机实现处理方法，其包括：

使用计算机来执行以下处理动作：

(a)输入同时捕获的帧对的序列，每个帧对包括从彩色摄像机输出的帧和从深度摄像机输出的帧(100)；

(b)使用面部检测方法和彩色摄像机帧来检测环境中潜在的人(102)；

(c)使用运动检测方法和深度摄像机帧来检测所述环境中潜在的人(104)；

(d)使用经由所述面部检测方法和运动检测方法生成的检测结果来确定所述环境中一个或多个人的位置(106)，经由所述面部检测方法生成的所述检测结果包括针对所检测到的每个人的、描绘该人的面部的彩色摄像机帧的部分的面部特性表征；

(e)对于仅经由所述运动检测方法检测到的每个人(108)，辨别该人在所述彩色摄像机的同时捕获的帧中的相应位置(110)，

生成描绘该人的面部的彩色摄像机帧的部分的所述面部特性表征(112)；

其中，对于在距所述彩色摄像机超过规定最大距离的距离处检测到的每个人，所述生成描绘该人的面部的彩色摄像机帧的部分的所述面部特性表征(112)包括：

将该人的位置提供给控制具有变焦能力的彩色摄像机的控制器，所述控制器能够基于该人的位置来以与从所述彩色摄像机到该人的距离成比例的程度对该人的面部进行放大，并且捕获该人的面部的变焦图像，其中，所述具有变焦能力的彩色摄像机包括所述彩色摄像机或其他彩色摄像机；

输入该人的面部的所述变焦图像，以及

生成描绘该人的面部的变焦图像的部分的所述面部特性表征；

(f)对于在所述环境中检测到的每个人(114)，

将为该人生成的每个面部特性表征分配给为该人建立的未知个人标识符(116)，

将每个所述面部特性表征存储在与所述计算机相关联的存储器中(118)，

尝试确认该人的身份(120)，以及

每当确认了该人的身份时，将被分配给为该人建立的未知个人标识符的每个面部特性表征重分配给为该人建立的面部识别训练数据库(124)。

2.根据权利要求1所述的处理方法，还包括：

输入同时捕获的帧对的新序列，每个帧对包括从彩色摄像机输出的帧和从深度摄像机输出的帧；

重复处理动作(b)到(e)；

对于在所述环境中检测到的并且在所述同时捕获的帧对的新序列中描绘的每个人，

确定该人是否对应于先前使用所述新序列之前的同时捕获的帧对的序列确定了其位置的人，

每当确定该人对应于先前使用所述新序列之前的同时捕获的帧对的序列确定了其位置的人时，确定先前是否确认了该人的身份，

每当确定先前确认了该人的身份时，对于根据所述同时捕获的帧对的新序列生成的每个面部特性表征，确定所述面部特性表征是否与被分配给为该人建立的面部识别训练数据库的每个面部特性表征相差规定程度，

对于根据所述同时捕获的帧对的新序列生成的每个面部特性表征，每当确定所述面部特性表征与被分配给为该人建立的面部识别训练数据库的每个面部特性表征相差规定程度时，将该面部特性表征分配给为该人建立的面部识别训练数据库，并且将该面部特性表征存储在与所述计算机相关联的存储器中。