[发明专利]一种防闭眼的拍照方法在审
申请号: | 201811587101.8 | 申请日: | 2018-12-25 |
公开(公告)号: | CN109740472A | 公开(公告)日: | 2019-05-10 |
发明(设计)人: | 韩冬桂;燕怒;张亮;朱鑫;李达;徐晔 | 申请(专利权)人: | 武汉纺织大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
代理公司: | 武汉市首臻知识产权代理有限公司 42229 | 代理人: | 高琴 |
地址: | 430073 *** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键点 人眼 图像质量系数 定位信息 人脸图像 帧图像 拍照 图像 闭眼状态 定位检测 定位模型 人脸检测 人脸区域 视频文件 图像拍摄 原始图像 闭状态 初始点 人脸 算法 排序 评判 筛选 拍摄 监测 统计 | ||
1.一种防闭眼的拍照方法,其特征在于:
所述方法依次包括以下步骤:
步骤A、首先拍摄人物场景的短视频,再对短视频文件进行每帧图像的人脸检测,获得人脸图像;
步骤B、先对步骤A得到的人脸图像进行人脸区域的关键定位检测以获取人眼关键点定位信息,再根据人眼关键点定位信息计算人眼轮廓外接矩形,并以此外接矩形的中心位置不变,将外接矩形扩大一倍后在原图上截取人眼图像区域,同时将原图上此区域的关键点坐标信息变换到截取的人眼图像上的对应位置;
步骤C、以步骤B得到的截取人眼图像的关键点作为初始点输入人眼关键点定位模型中,获取处理后的人眼关键点定位信息;
步骤D、先根据处理后的人眼关键点定位信息计算人眼的睁闭状态,再统计每帧图像中人脸和闭眼人数,判断闭眼人数是否大于0,若等于0,则将对应的图像进行步骤E的操作,否则不进行后续操作;
步骤E、先利用图像质量评判算法对步骤D筛选出的图像进行图像质量系数的计算,再根据图像质量系数对各图像进行排序,并筛选出图像质量系数处于前数位的原始图像供用户选择即可。
2.根据权利要求1所述的一种防闭眼的拍照方法,其特征在于:
步骤C中,所述人眼关键点定位模型的数学表达式为:
上式中,表示图像上的p个特征点,表示从p个特征点上提取的SIFT特征,其中每个特征点提取128个SIFT特征,φ*=h(d(x*))表示该人脸的真实特征点所提取的SIFT特征,x0表示人眼关键点的初始位置,Δx表示人眼关键点的移动步长。
3.根据权利要求1或2所述的一种防闭眼的拍照方法,其特征在于:
步骤D中,所述人眼的睁闭状态通过计算人眼的纵横比得到:
上式中,EAR表示人眼的纵横比,p1、p4分别表示作、右眼角的特征点坐标信息,p2、p3分别表示上眼睑上左、右两侧的特征点坐标信息,p6、p5分别表示下眼睑上左、右两侧的特征点坐标信息。
4.根据权利要求1或2所述的一种防闭眼的拍照方法,其特征在于:
步骤E中,所述利用图像质量评判算法对步骤D筛选出的图像进行图像质量系数的计算基于多因素融合方法,依次包括以下步骤:
步骤E1、针对各图像质量评判因素,先定义评估各因素的人脸图像质量评估算法,计算出各因素下的人脸图像质量分数,再分别根据各因素、利用人脸质量评估算法对局部像素或特征进行分析,然后通过融合的方法得到各因素的全局分数,此全局分数即为各因素的原始图像质量分数,其中,所述图像质量评判因素包括遮挡范围、模糊度、光照强度、人脸姿态角度、人脸完整度、人脸大小;
步骤E2、先对各因素的原始图像质量分数进行归一化处理,再将归一化后的各因素的图像质量分数映射到一个总体的人脸质量分数,该总体的人脸质量分数即为图像质量系数。
5.根据权利要求4所述的一种防闭眼的拍照方法,其特征在于:
步骤E1中,
对于模糊度因素,该因素下的人脸图像质量分数的计算是指:
先利用拉普拉斯算子做卷积运算,再计算方差作为模糊度系数,然后将该模糊度系数与预先建立的模糊度系数-质量分数数据库匹配得到该因素下的人脸图像质量分数,其中,拉普拉斯算子的数学表达式为:
上式中,表示拉普拉斯变换,f(x,y)表示图像中的坐标(x,y)所对应的图像灰度值;
对于光照强度因素,该因素下的人脸图像质量分数的计算是指:
先采用累积直方图来确定人脸光照强度,判断当前人脸图像属于高光照还是低光照类型,再将该光照强度与预先建立的光照强度-质量分数数据库匹配得到该因素下的人脸图像质量分数;
对于人脸姿态角度因素,该因素下的人脸图像质量分数的计算是指:
先利用人脸姿态估计计算出人脸的pitch、yaw、roll角度信息,再将该角度信息与预先建立的人脸姿态信息-质量分数数据库匹配得到该因素下的人脸图像质量分数。
6.根据权利要求1或2所述的一种防闭眼的拍照方法,其特征在于:
步骤A中,所述每帧图像的人脸检测通过每帧人脸检测个数是否大于0来判断此帧图像有无人脸,对于无人脸的图像不进行后续分析处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉纺织大学,未经武汉纺织大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811587101.8/1.html,转载请声明来源钻瓜专利网。