[发明专利]一种基于人脸识别的广告转化率确定方法及系统

权利要求书

1.一种基于人脸识别的广告转化率确定方法，其特征在于，所述方法包括：

基于用户观看广告时采集到的用户的视频图像，在所述视频图像中确定出所有人脸图像，确定所有人脸图像对应的人脸特征；

将视频图像解码为图片序列，得到每个人脸图像对应的人脸特征向量，根据所述人脸特征向量，得到人脸序列特征；

基于所有人脸特征得到的平均人脸图像特征，并将所述平均人脸图像特征与所述人脸序列特征拼接，得到综合人脸特征；

将所述综合人脸特征送入感知机和回归器得到广告转化率。

2.如权利要求1所述的方法，其特征在于，确定所有的人脸图像对应的人脸特征，包括：

将视频图像解码为连续多帧的图片；

将每张图片中确定出的人脸图像送入到卷积神经网络，得到每张人脸图像对应的人脸特征。

3.如权利要求1所述的方法，其特征在于，将视频图像解码为图片序列，得到每个人脸图像对应的人脸特征向量，根据所述人脸特征向量，得到人脸序列特征，包括：

将视频图像解码为连续帧的图片序列；

将每帧图片中人脸部分图像传入到人脸图像特征模型，得到每个人脸图像对应的人脸特征向量；

将得到的人脸特征向量送入循环神经网络，得到所述人脸序列特征。

4.如权利要求1所述的方法，其特征在于，基于所有人脸特征得到的平均人脸图像特征，并将所述平均人脸图像特征与所述人脸序列特征拼接，得到综合人脸特征，包括：

将视频图像中的人脸图像特征取平均得到平均人脸图像特征；

将得到的平均人脸图像特征与人脸序列特征以及用户个人信息特征进行特征拼接，得到综合人脸特征。

5.一种基于人脸识别的广告转化率确定系统，其特征在于，所述系统包括：

特征提取模块，用于在用户无法填写个人信息时通过采集的到的人脸图片，得到用户个人信息；同时用于基于用户观看广告时采集到的用户的视频图像，在所述视频图像中确定出所有人脸图像，确定所有的人脸图像对应的人脸特征；将视频图像解码为图片序列，得到每个人脸图像对应的人脸特征向量，根据所述人脸特征向量，得到人脸序列特征；根据所有人脸特征的平均人脸图像特征，并将所述平均人脸图像特征与所述人脸序列特征以及用户个人信息特征拼接，得到综合人脸特征；

预测模块，用于将所述综合人脸特征送入感知机或回归器得到广告转化率。

6.如权利要求5所述的系统，其特征在于，所述特征提取模块，具体用于将确定出的人脸图像送入到卷积神经网络，得到每张人脸图像对应的人脸特征。同时，人脸特征在通过分类器即可得到预测的用户个人信息。

7.如权利要求5所述的系统，其特征在于，所述特征提取模块，具体用于将视频图像解码为连续帧的图片序列；将每帧图片中人脸部分图像传入到人脸图像特征模型，得到每个人脸图像对应的人脸特征向量；将得到的人脸特征向量送入循环神经网络，得到所述人脸序列特征。

8.如权利要求5所述的系统，其特征在于，所述特征提取模块，具体用于将视频图像中的人脸图像特征取平均得到平均人脸图像特征；将得到的平均人脸图像特征与人脸序列特征以及用户个人信息特征进行特征拼接，得到综合人脸特征。