[发明专利]一种基于自监督和混合密度网络的人脸动画生成方法在审
申请号: | 202111424899.6 | 申请日: | 2021-11-26 |
公开(公告)号: | CN114155321A | 公开(公告)日: | 2022-03-08 |
发明(设计)人: | 王建荣;范洪凯;喻梅;李雪威;刘李;李森 | 申请(专利权)人: | 天津大学 |
主分类号: | G06T13/00 | 分类号: | G06T13/00;G06V40/16;G06V10/82;G06N3/04;G06N3/08;G10L15/02;G10L15/04 |
代理公司: | 天津盛理知识产权代理有限公司 12209 | 代理人: | 霍慧慧 |
地址: | 300071*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于自监督和混合密度网络的人脸动画生成方法,从语音fbank特征中分离语音内容特征向量和身份特征向量,为提取高质量语音特征,引入记忆模块,在记忆模块中保存多个不同假设,将语音映射到唇部动作和头部动作时产生的不确定性分配给记忆模块,从而使特征提取器专注于特征提取。为了解决语音映射到头部动作时产生的不确定性问题,将混合密度网络引入到人脸关键点回归任务中,提出基于混合密度网络的人脸关键点回归网络。最后将人脸关键点和参考人脸图像输入到图片到图片转换网络中得到最终的人脸图像。 | ||
搜索关键词: | 一种 基于 监督 混合 密度 网络 动画 生成 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津大学,未经天津大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111424899.6/,转载请声明来源钻瓜专利网。