[发明专利]一种信息处理方法、装置、设备及可读存储介质在审
| 申请号: | 202210467194.0 | 申请日: | 2022-04-27 |
| 公开(公告)号: | CN114821727A | 公开(公告)日: | 2022-07-29 |
| 发明(设计)人: | 胡良军;王乐;苏宗涛;罗德海;廖智勇 | 申请(专利权)人: | 咪咕动漫有限公司;咪咕文化科技有限公司;中国移动通信集团有限公司 |
| 主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V10/82;G06N3/04;G06N3/08 |
| 代理公司: | 北京银龙知识产权代理有限公司 11243 | 代理人: | 王丹 |
| 地址: | 361008 福建省*** | 国省代码: | 福建;35 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 信息处理 方法 装置 设备 可读 存储 介质 | ||
1.一种信息处理方法,其特征在于,包括:
在用户的人脸图像中,确定人脸轮廓关键点;
根据所述人脸轮廓关键点确定人脸姿态角;
根据所述人脸轮廓关键点,确定第一目标部位的第一关键点的特征参数,其中,所述第一目标部位包括眉毛和眼睛;
根据所述特征参数以及所述人脸姿态角,确定所述用户的虚拟形象的眼睛闭合幅值。
2.根据权利要求1所述的方法,其特征在于,所述根据所述人脸轮廓关键点确定人脸姿态角,包括:
从所述人脸轮廓关键点中,选择第二目标部位的第二关键点;其中,所述第二目标部位包括鼻尖,下巴,左眼角,右眼角,左嘴角,右嘴角中的一项或者多项;
获得所述第二关键点的二维坐标以及所述第二关键点的三维坐标;
根据所述第二关键点的二维坐标以及第二所述关键点的三维坐标,计算人脸的旋转向量;
根据所述旋转向量,确定所述人脸姿态角。
3.根据权利要求1所述的方法,其特征在于,所述根据所述人脸轮廓关键点,确定第一目标部位的第一关键点的特征参数,包括:
从所述人脸轮廓关键点中确定所述第一目标部位的第一关键点;
从所述第一关键点中确定上眼皮的关键点以及下眼皮的关键点;
从所述上眼皮的关键点中确定上眼皮关键点的中心点,以及,从所述下眼皮的关键点中确定下眼皮关键点的中心点;
计算所述上眼皮关键点的中心点与所述下眼皮关键点的中心点之间的距离,以及,计算所述第一目标部位所在区域的外接矩形的边长。
4.根据权利要求3所述的方法,其特征在于,从所述第一关键点中确定上眼皮的关键点以及下眼皮的关键点,包括:
根据所述第一关键点,利用关键点预测模型预测所述第一关键点的分布;
根据所述第一关键点的分布,确定所述上眼皮的关键点以及所述下眼皮的关键点。
5.根据权利要求3所述的方法,其特征在于,所述根据所述特征参数以及所述人脸姿态角,确定所述用户的虚拟形象的眼睛闭合幅值,包括:
根据所述特征参数以及所述人脸姿态角,确定预测的眼睛闭合幅值;
根据所述预测的眼睛闭合幅值,确定所述用户的虚拟形象的眼睛闭合幅值。
6.根据权利要求5所述的方法,其特征在于,所述特征参数包括所述上眼皮关键点的中心点与所述下眼皮关键点的中心点之间的距离、所述第一目标部位所在区域的外接矩形的边长;
所述根据所述特征参数以及所述人脸姿态角,确定预测的眼睛闭合幅值,包括:
根据所述上眼皮关键点的中心点与所述下眼皮关键点的中心点之间的距离、所述第一目标部位所在区域的外接矩形的边长以及所述人脸姿态角,确定预测的眼睛闭合幅值。
7.根据权利要求6所述的方法,其特征在于,根据以下公式确定预测的眼睛闭合幅值:
其中,value表示所述眼睛闭合幅值,Leye表示所述上眼皮关键点的中心点与所述下眼皮关键点的中心点之间的距离,yaw表示所述人脸姿态角,Lmax表示所述第一目标部位所在区域的外接矩形的边长。
8.根据权利要求5所述的方法,其特征在于,所述根据所述预测的眼睛闭合幅值,确定所述用户的虚拟形象的眼睛闭合幅值,包括:
当所述预测的眼睛闭合幅值小于第一预设值时,确定所述用户的虚拟形象的眼睛闭合幅值为0;
当所述预测的眼睛闭合幅值小于第二预设值且大于或等于所述第一预设值时,确定所述用户的虚拟形象的眼睛闭合幅值为所述预测的眼睛闭合幅值;
所述预测的眼睛闭合幅值大于所述第二预设值时,确定所述用户的虚拟形象的眼睛闭合幅值为1;
其中,所述第一预设值和所述第二预设值大于0,且所述第一预设值小于所述第二预设值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于咪咕动漫有限公司;咪咕文化科技有限公司;中国移动通信集团有限公司,未经咪咕动漫有限公司;咪咕文化科技有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210467194.0/1.html,转载请声明来源钻瓜专利网。





