[发明专利]歌唱嘴型与面部动画生成方法、装置及电子设备在审
申请号: | 202210710648.2 | 申请日: | 2022-06-22 |
公开(公告)号: | CN114972592A | 公开(公告)日: | 2022-08-30 |
发明(设计)人: | 尹学渊;肖钦引;刘鑫忠;陈洪宇;马思雨 | 申请(专利权)人: | 成都潜在人工智能科技有限公司 |
主分类号: | G06T13/40 | 分类号: | G06T13/40;G06V40/16;G06V10/774 |
代理公司: | 成都睿道专利代理事务所(普通合伙) 51217 | 代理人: | 许立 |
地址: | 610000 四川省成都市高新区*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于音视频同步技术领域,具体公开了歌唱嘴型与面部动画生成方法、装置及电子设备,其中方法包括步骤:将歌词与音符序列输入乐谱编码器得到第一歌唱声音参数特征向量序列;输入音长预测器得到每个音素的预测时长;将第一歌唱声音参数特征向量序列和每个音素的预测时长输入长度调节器得到第二歌唱声音参数特征向量序列;输入解码器得到音素信息序列;将音素信息序列输入嘴型信息预测模型得到嘴型信息序列;生成包含嘴型信息对应的嘴型的人脸图像;将人脸图像作为关键帧生成面部动画。本发明将歌曲的歌词和音符序列作为歌唱嘴型与面部动画生成所需的输入信息,结合歌唱时能量大小对嘴型动画的影响,保证嘴型更改与音素变化的时间序列对应。 | ||
搜索关键词: | 歌唱 面部 动画 生成 方法 装置 电子设备 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都潜在人工智能科技有限公司,未经成都潜在人工智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210710648.2/,转载请声明来源钻瓜专利网。