[发明专利]图像生成方法、动态表情图像生成方法及装置有效
申请号: | 201711391032.9 | 申请日: | 2017-12-21 |
公开(公告)号: | CN109949390B | 公开(公告)日: | 2022-09-09 |
发明(设计)人: | 梁睿思;李强;张雨涵;刘晓峰 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T11/60 | 分类号: | G06T11/60;G06T17/00;G06V40/16 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 刘映东 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 生成 方法 动态 表情 装置 | ||
1.一种图像生成方法,其特征在于,所述方法包括:
获取第一图像和文字序列,所述文字序列包括按序排列的n个文字,n为正整数,所述第一图像是任意具有嘴部图像区域的静态图像;
识别所述第一图像中的嘴部几何信息;
根据所述嘴部几何信息生成嘴部图像区域的网格模型,所述网格模型中包括嘴部骨骼和嘴部蒙皮,所述嘴部骨骼用于控制嘴部动作的骨架,所述嘴部骨骼中包括若干个骨骼,所述若干个骨骼由多个控制点依次相连形成;
根据所述n个文字与五类发音嘴型之间的第一对应关系,以及所述发音嘴型和所述嘴部骨骼之间的第二对应关系,改变所述嘴部骨骼的位置,所述五类发音嘴型与元音发音嘴型对应;
根据n个改变后的所述嘴部骨骼的位置,对所述嘴部蒙皮中的各个顶点仿射变化,得到n个变形后的嘴部图像区域;
根据所述第一图像和所述n个变形后的嘴部图像区域生成第二图像,所述第二图像是在所述第一图像的基础上结合所述文字序列生成的动态表情图像。
2.根据权利要求1所述的方法,其特征在于,所述嘴部骨骼包括:上嘴唇控制点、下嘴唇控制点、左嘴角控制点和右嘴角控制点;
所述根据所述n个文字与所述发音嘴型之间的第一对应关系,以及所述发音嘴型和所述嘴部骨骼之间的第二对应关系,改变所述嘴部骨骼的位置,包括:
根据所述n个文字对应的发音嘴型分别确定嘴唇开合参数和嘴角缩放参数;
根据所述嘴唇开合参数调整所述上嘴唇控制点和所述下嘴唇控制点之间的距离;
根据所述嘴角缩放参数调整所述左嘴角控制点和所述右嘴角控制点之间的距离。
3.根据权利要求1所述的方法,其特征在于,所述根据n个改变后的所述嘴部骨骼的位置,对所述嘴部蒙皮中的各个顶点仿射变化,得到n个变形后的嘴部图像区域,包括:
获取所述嘴部蒙皮中的各个顶点的蒙皮权重;
根据所述改变后的所述嘴部骨骼的位置,对所述各个顶点根据各自对应的所述蒙皮权重进行仿射变换,得到所述n个变形后的嘴部图像区域。
4.根据权利要求1至3任一所述的方法,其特征在于,所述嘴部几何信息包括:嘴部外轮廓和嘴部内轮廓;
所述根据所述嘴部几何信息生成嘴部图像区域的网格模型,包括:
将所述嘴部外轮廓的第一左嘴角点和第一右嘴角点相连,得到嘴角连线;
根据所述嘴角连线和所述嘴部内轮廓的交点,生成左嘴角控制点和右嘴角控制点;
根据所述嘴角连线作至少一条垂线,根据所述至少一条垂线与所述嘴部外轮廓和所述嘴部内轮廓的交点,确定出上嘴唇控制点和下嘴唇控制点;
将所述左嘴角控制点、所述上嘴唇控制点、所述右嘴角控制点和所述下嘴唇控制点依次相连后,生成所述嘴部骨骼。
5.根据权利要求4所述的方法,其特征在于,所述根据所述嘴角连线和所述嘴部内轮廓的交点,生成左嘴角控制点和右嘴角控制点,包括:
根据所述嘴角连线与所述嘴部内轮廓的交点,得到所述嘴部内轮廓的第二左嘴角点和第二右嘴角点;
将所述嘴角连线上所述第一左嘴角点和所述第二左嘴角点之间的中点,确定为所述左嘴角控制点;
将所述嘴角连线上所述第一右嘴角点和所述第二右嘴角点之间的中点,确定为所述右嘴角控制点。
6.根据权利要求4所述的方法,其特征在于,所述根据所述嘴角连线作至少一条垂线,根据所述至少一条垂线与所述嘴部外轮廓和所述嘴部内轮廓的交点,确定出上嘴唇控制点和下嘴唇控制点,包括:
根据所述嘴角连线上的左侧1/3点作第一垂线,得到所述第一垂线与所述嘴部外轮廓相交的第一上交点和第一下交点,以及所述第一垂线与所述嘴部内轮廓相连的第二上交点和第二下交点;
根据所述嘴角连线上的右侧1/3点作第二垂线,得到所述第二垂线与所述嘴部外轮廓相交的第三上交点和第三下交点,以及所述第二垂线与所述嘴部内轮廓相连的第四上交点和第四下交点;
将所述第一上交点和所述第二上交点的中点确定为第一上嘴唇控制点,所述第三上交点和所述第四上交点的中点确定为第二上嘴唇控制点;
将所述第一下交点和所述第二下交点的中点确定为第一下嘴唇控制点,所述第三下交点和所述第四下交点的中点确定为第二下嘴唇控制点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711391032.9/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序