[发明专利]视频封面生成方法、装置及电子设备

权利要求书

1.一种视频封面生成方法，其特征在于，包括：

对目标视频进行解析，得到多个解析图像；

对所述多个解析图像进行聚类处理，得到多个候选封面图像；

基于对所述候选封面图像中包含的目标对象执行的关键点检测结果，对所述多个候选封面图像中包含的目标对象执行视线检测和睁眼检测，以过滤掉不符合预设要求的候选封面图像；

基于图像质量评价网络对过滤后剩余的候选封面图像的质量评分，从过滤后剩余的候选封面图像中选取目标图像作为所述目标视频的最终封面图像。

2.根据权利要求1所述的方法，其特征在于，所述对目标视频进行解析，得到多个解析图像，包括：

对所述目标视频中包含的所有视频帧执行目标检测；

基于目标检测的结果，判断组成目标视频的视频帧中是否包含所述目标对象；

若是，则将包含所述目标对象的视频帧设置为所述解析图像。

3.根据权利要求1所述的方法，其特征在于，所述对所述多个解析图像进行聚类处理，得到多个候选封面图像，包括：

对所述多个解析图像执行k类的聚类计算；

在每个聚类中选择一张符合预设条件的图像作为所述候选封面图像。

4.根据权利要求3所述的方法，其特征在于，所述对所述多个解析图像执行k类的聚类计算，包括：

在所述多个解析图像中选取k个样本点为初始聚类中心，记为z1(l),z2(l),……zk(l)，迭代序号l＝1；

使用最近邻规则将所有样本分配到各聚类中心所代表的k类ωj(k)中，各类所包含的样本数为Nj(l)；

计算各类的重心，将计算得到的重心确定为新的聚类中心；

对于第j次迭代，判断zj(l+1)与zj(l)的值是否相同，当zj(l+1)≠zj(l)时继续迭代计算，当zj(l+1)＝zj(l)时，停止迭代计算。

5.根据权利要求1所述的方法，其特征在于，所述对所述多个候选封面图像中包含的目标对象执行视线检测和睁眼检测之前，所述方法还包括：

利用预先设置的卷积神经网络对所述多个候选封面图像执行质量评价；

基于所述质量评价的结果，确定所述多个候选封面图像中每一个图像的质量评分。

6.根据权利要求1所述的方法，其特征在于，所述对所述多个候选封面图像中包含的目标对象执行视线检测和睁眼检测，包括：

获取对候选封面图像中包含的目标对象执行的关键点检测结果；

基于所述关键点检测结果，确定出瞳孔关键点、眼球关键点及眼轮廓关键点；

基于所述瞳孔关键点、眼球关键点及眼轮廓关键点，对所述目标对象的眼球执行建模操作；

基于建模操作的结果，来对所述目标对象执行视线检测和睁眼检测。

7.根据权利要求6所述的方法，其特征在于，所述基于建模操作的结果，来对所述目标对象执行视线检测和睁眼检测，包括：

使用CLNF模型检测出眼球的关键点；

对眼睛进行三维建模；

连接原点到瞳孔中心形成一条射线，计算其与眼球的交点，将眼球中心到交点方向的向量作为视线方向。

8.根据权利要求6所述的方法，其特征在于，所述基于建模操作的结果，来对所述目标对象执行视线检测和睁眼检测，包括：

通过建模操作的结果，计算外眼轮廓的宽高比；

通过判断所述宽高比是否大于预设阈值来判断所述目标对象是否处于睁眼状态。

9.根据权利要求1所述的方法，其特征在于，所述基于图像质量评价网络对过滤后剩余的候选封面图像的质量评分，从过滤后剩余的候选封面图像中选取目标图像作为所述目标视频的最终封面图像，包括：

从过滤后剩余的候选封面图像中选取质量评分最高的候选封面图像；

将所述质量评分最高的候选封面图像作为所述目标视频的最终封面图像。