[发明专利]数字对象的动画生成方法、装置、电子设备及存储介质在审
| 申请号: | 202210570560.5 | 申请日: | 2022-05-24 |
| 公开(公告)号: | CN114898018A | 公开(公告)日: | 2022-08-12 |
| 发明(设计)人: | 郭紫垣 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06T13/00 | 分类号: | G06T13/00;G10L13/08;G10L15/06 |
| 代理公司: | 北京鸿德海业知识产权代理有限公司 11412 | 代理人: | 贺晨笛 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数字 对象 动画 生成 方法 装置 电子设备 存储 介质 | ||
1.一种数字对象的动画生成方法,包括:
获取目标文本对应的语音特征信息;
获取所述语音特征信息对应的动态参数,所述动态参数用于表征动作变化;
根据所述动态参数,对预设的数字对象进行驱动处理,以生成所述数字对象的动画。
2.根据权利要求1所述的方法,其中,所述获取所述语音特征信息对应的动态参数,包括:
将所述语音特征信息输入预设的数字对象动态识别模型,以获得所述语音特征信息对应的动态参数。
3.根据权利要求1或2所述的方法,其中,所述获取所述语音特征信息对应的动态参数,包括:
获取所述语音特征信息对应的语义特征信息;
根据所述语义特征信息,获得所述动态参数。
4.根据权利要求3所述的方法,其中,所述动态参数包括躯体动作参数和嘴部动作参数,所述躯体动作参数用于表征躯体动作变化,所述嘴部动作参数用于表征嘴部动作变化,所述根据所述语义特征信息,获得所述动态参数,包括:
根据所述语义特征信息,获得所述嘴部动作参数;
根据所述语义特征信息和所述嘴部动作参数,获得所述躯体动作参数。
5.根据权利要求1-4中任一项所述的方法,其中,所述获取目标文本的语音特征信息,包括
获取所述目标文本;
对所述目标文本进行语音转换处理,以获得所述目标文本对应的语音;
对所述语音进行特征提取处理,以获得所述语音特征信息。
6.一种模型的训练方法,包括:
获取样本数据,所述样本数据包括样本语音特征信息和所述样本语音特征信息对应的样本动态参数;
将所述样本语音特征信息作为输入、所述样本动态参数作为标签,对预设模型进行训练,以获得数字对象动态识别模型,所述数字对象动态识别模型用于识别语音特征信息对应的动态参数,所述动态参数用于表征动作变化。
7.根据权利要求6所述的方法,其中,所述样本动态参数包括样本躯体动作参数和样本嘴部动作参数,所述将所述样本语音特征信息作为输入、所述样本动态参数作为标签,对预设模型进行训练,以获得数字对象动态识别模型,包括:
将所述样本语音特征信息输入所述预设模型中的第一子模型,以获得第一输出结果,所述第一子模型用于表征语音特征信息与语义特征信息的对应关系;
将所述第一输出结果和所述样本嘴部动作参数输入所述预设模型中的第二子模型,以获得第二输出结果,所述第二子模型用于表征语义特征信息与嘴部动作参数的对应关系;
将所述第一输出结果、所述第二输出结果和所述样本躯体动作参数输入所述预设模型中的第三子模型,以获得第三输出结果,所述第三子模型用于表征语义特征信息、嘴部动作参数与躯体动作参数的对应关系;
根据所述第一输出结果、所述第二输出结果和所述第三输出结果,对所述预设模型进行更新训练,以获得所述数字对象动态识别模型。
8.根据权利要求6或7所述的方法,其中,所述获取样本数据,包括:
对目标视频数据进行动态参数检测处理,以获得初始动态参数;
对所述目标视频数据中的语音数据进行音色转换处理,以获得特定音色的语音数据;
对所述特定音色的语音数据进行语音特征提取处理,以获得所述样本语音特征信息;
根据所述目标视频数据中的语音数据和所述特定音色的语音数据,对所述初始动态参数进行调整处理,以获得所述样本动态参数。
9.一种数字对象动画的生成装置,包括:
第一获取单元,用于获取目标文本对应的语音特征信息;
第二获取单元,用于获取所述语音特征信息对应的动态参数,所述动态参数用于表征动作变化;
驱动处理单元,用于根据所述动态参数,对预设的数字对象进行驱动处理,以生成所述数字对象的动画。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210570560.5/1.html,转载请声明来源钻瓜专利网。





