[发明专利]一种基于教师学生网络的语音驱动说话人脸视频生成方法有效
申请号: | 202110811278.7 | 申请日: | 2021-07-19 |
公开(公告)号: | CN113628635B | 公开(公告)日: | 2023-09-15 |
发明(设计)人: | 熊盛武;陈燚雷;曾瑞;林承德;马宜祯 | 申请(专利权)人: | 武汉理工大学 |
主分类号: | G10L21/10 | 分类号: | G10L21/10;G10L21/18;G10L25/24;G10L25/30;G10L25/57;G06V20/40;G06V40/16;G06V10/774;G06V10/82;G06N3/0464;G06N3/08 |
代理公司: | 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 | 代理人: | 王琪 |
地址: | 430070 湖*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于教师学生网络的语音驱动说话人脸视频生成方法。首先利用教师网络压缩出视频数据中的动态信息,接着利用学生网络学习语音到动态信息的预测,然后使用预训练好的教师网络提取的人脸动态信息作为监督,结合人脸身份信息实现语音驱动人脸的说话任务。相比于传统的任意说话人脸视频生成技术,本发明首次挖掘视频信号中的动态信息,在人脸生成、图片清晰度和生成说话人脸的视频唇形的准确度上有较大的提升。 | ||
搜索关键词: | 一种 基于 教师 学生 网络 语音 驱动 说话 视频 生成 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉理工大学,未经武汉理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110811278.7/,转载请声明来源钻瓜专利网。
- 上一篇:一种双流道水药一体化多功能喷头及方法
- 下一篇:一种嵌入式串口测试方法及装置