[发明专利]虚拟数字人动态嘴型的生成方法及相关设备在审
申请号: | 202210626179.6 | 申请日: | 2022-06-02 |
公开(公告)号: | CN114996516A | 公开(公告)日: | 2022-09-02 |
发明(设计)人: | 苏朋杨;蔡卓君;白新平 | 申请(专利权)人: | 上海积图科技有限公司 |
主分类号: | G06F16/783 | 分类号: | G06F16/783;G06F16/78;G10L15/18 |
代理公司: | 深圳市特讯知识产权代理事务所(普通合伙) 44653 | 代理人: | 吴汗 |
地址: | 200030 上海市浦东新区中国(上*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种虚拟数字人动态嘴型的生成方法及相关设备,其中方法包括:提取虚拟数字人音视频中的音频;对音频进行语音识别获得拼音文档;将拼音文档和音频进行音素和音频帧对齐处理,获得带有时间序列的音素文档;从嘴型数据库中获取音素文档中音素集对应的嘴型图片集;提取虚拟数字人音视频中的视频;基于音素集中各个音素在音素文档中对应的时间序列确定各个音素在视频中对应的视频帧;从嘴型图片集中获取各个音素对应的嘴型图片;对于每个嘴型图片,通过亮度追踪的方式识别出嘴型图片在视频帧上的嘴巴位置,根据嘴巴位置将所述嘴型图片贴到视频帧中。本发明的方法可以快速且准确的生成虚拟数字人动态嘴型,虚拟数字人更加生动有趣。 | ||
搜索关键词: | 虚拟 数字 动态 生成 方法 相关 设备 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海积图科技有限公司,未经上海积图科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210626179.6/,转载请声明来源钻瓜专利网。