[发明专利]视频生成模型的构建和视频生成方法、装置、设备及介质有效
申请号: | 202110088850.1 | 申请日: | 2021-01-22 |
公开(公告)号: | CN112887789B | 公开(公告)日: | 2023-02-21 |
发明(设计)人: | 胡天舒;洪智滨 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/472;G06N20/00 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种视频生成模型的构建和视频生成方法、装置、设备及介质,涉及计算机技术领域,尤其涉及深度学习、计算机视觉和语音技术等人工智能技术领域。具体实现方案为:将样本人物图像和样本语音片段输入初始模型的编码器网络,得到图像特征和语音动作关联特征,将图像特征和语音动作关联特征输入初始模型的解码器网络,预测样本语音片段驱动样本人物图像的人物图像序列,并将语音动作关联特征输入初始模型的音素预测网络,预测样本语音片段的音素信息;根据样本语音片段的音素标签、样本语音片段关联的样本视频帧序列、音素信息和人物图像序列,对初始模型进行训练,得到视频生成模型。为图像驱动技术的发展提供了一种新思路。 | ||
搜索关键词: | 视频 生成 模型 构建 方法 装置 设备 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110088850.1/,转载请声明来源钻瓜专利网。
- 上一篇:干扰消除方法、装置及电子设备
- 下一篇:一种板拼焊装置及方法