[发明专利]视频内容中的脸部识别

权利要求书

1.在计算环境中，至少部分在至少一个处理器上执行的方法，包括：接收与在输入视频帧中检测到的脸相对应的脸部检测数据(704)，将脸部检测数据与与在脸部图库中维护的脸部标识数据进行匹配(712)以识别在输入视频帧中的脸，以及生成将所述视频帧和脸与所述脸部标识数据相关联的元数据(714)。

2.如权利要求1所述的方法，其特征在于，进一步包括：在一个或多个后续帧上跟踪在所述输入视频帧中检测到的所述脸，并且生成将所述一个或多个后续帧的每个与所述脸部标识数据相关联的元数据；或者包括：在一个或多个先前帧上跟踪在所述输入视频帧中检测到的所述脸，并且生成将所述一个或多个先前帧的每个与所述脸部标识数据相关联的元数据；或者包括：既在一个或多个后续帧上跟踪在所述输入视频帧中检测到的所述脸，并且生成将所述一个或多个后续帧的每个与所述脸部标识数据相关联的元数据，也在一个或多个先前帧上跟踪在所述输入视频帧中检测到的所述脸，并且生成将所述一个或多个先前帧的每个与所述脸部标识数据相关联的元数据这两者。

3.如权利要求1所述的方法，其特征在于，进一步包括：构建所述脸部图库，包括基于类似性数据将输入视频帧中检测到的脸分组到候选分组中。

4.如权利要求3所述的方法，其特征在于，还包括：

基于类似性数据将一个候选分组分成至少两个候选分组，或者

基于类似性数据将两个或更多的候选分组组合成单个候选分组，或者

从一个候选分组中过滤出至少一些脸，将剩余的脸加入到所述脸部图库之一中，并用所述脸部标识数据来标记每个脸部图库，或者

基于类似性数据将一个候选分组分成至少两个候选分组、基于类似性数据将两个或更多的候选分组组合成单个候选分组、或者从一个候选分组中过滤出至少一些脸、将剩余的脸加入到所述脸部图库之一中、以及用所述脸部标识数据来标记每个脸部图库中的任意组合。

5.如权利要求1所述的方法，其特征在于，还包括：接收标识观看者选择的脸的请求，所述请求与视频帧号相关联，访问所述元数据以确定是否存在用于该观看者选择的脸的脸部标识数据，并且如果存在，返回对应于所述脸部标识数据的信息作为对所述请求的响应。

6.在计算环境中，一种系统包括：从输入视频中识别脸的脸部识别流水线，包括配置用于基于由脸部检测模块数据(102)所提供的脸部检测数据通过类似性来将脸分组的脸部分组模块(104)，所述分组模块进一步配置用于提供对应于所述分组的脸部图库，所述脸部图库包括了标识与脸部图库(110)中的脸相关联的每个人的信息，所述脸部标识流水线进一步包括脸部识别机制(108)，所述脸部识别机制(108)将所述输入视频中的脸与所述脸部图库中的脸进行匹配以输出对应于所述输入视频中所识别的脸的信息。

7.如权利要求6所述的系统，其特征在于，进一步包括：脸部跟踪模块，其被配置用于跟踪与所述脸部检测模块数据为之提供脸部检测数据的帧相邻的一个或多个帧中的脸。

8.如权利要求6所述的系统，其特征在于，对应于在所述输入视频中所识别的脸的所述信息包括：元数据，从该元数据中可以标识在节目或电影中的、在给定帧和该帧的位置处的人，并且还包括配置用于访问所述元数据以标识给定节目或电影、给定帧和该帧位置处的人。

9.一个或多个具有计算机可执行指令的计算机可读介质，所述计算机可执行指令在被执行时执行以下步骤，包括：

接收对应于在输入视频帧中检测到的脸的脸部检测数据(704)；

基于至少一些所述脸部检测数据跟踪一个或多个相邻视频帧中的所述脸；以及

基于所述脸部检测数据或对应于跟踪所述脸部的数据或基于所述脸部检测数据和对应于跟踪所述脸部的数据两者来识别(712)所述输入视频帧和每个相邻视频帧中的所述脸。

10.如权利要求9所述的一个或多个计算机可读介质，其特征在于，识别所述脸包括将所述输入视频帧和每个相邻视频帧中的所述脸与在脸部图库中维护的脸部标识数据进行匹配。