[发明专利]三维模型的智能驱动方法在审
申请号: | 202111529590.3 | 申请日: | 2021-12-14 |
公开(公告)号: | CN114219892A | 公开(公告)日: | 2022-03-22 |
发明(设计)人: | 伏英娜;曹林浪 | 申请(专利权)人: | 迈吉客科技(北京)有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06F16/33;G06F16/36;G06F16/58;G06F16/68;G06K9/62;G06V40/16;G06V10/774 |
代理公司: | 北京维正专利代理有限公司 11508 | 代理人: | 谢明晖 |
地址: | 100089 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维 模型 智能 驱动 方法 | ||
1.一种三维模型的智能驱动方法,其特征在于,包括:
获取脚本文件;
将所述脚本文件输入至情感分析模型,得到与所述脚本文件对应的情感标签;
基于所述脚本文件和情感标签,生成有感情的语音;基于所述情感标签或所述语音,生成面部表情关键点;同时基于所述情感标签生成三维模型动作;
基于所述表情关键点、语音、三维模型动作和脚本文件,构建三维角色及其应用场景,驱动所述三维角色进行展示及互动。
2.根据权利要求1所述的方法,其特征在于,所述脚本文件包括已进行关联的图片、视频、语音和/或文本。
3.根据权利要求2所述的方法,其特征在于,所述获取脚本文件包括:
从多模态知识图谱中,获取所述脚本文件;所述多模态知识图谱中包括各类自然语言信息以及与其对应的物料信息;所述物料信息包括图片、视频和/或文字。
4.根据权利要求3所述的方法,其特征在于,所述情感分析模型通过如下方式进行训练:
生成训练样本集合,其中,训练样本包括带有标注信息的脚本文件;所述标注信息为情感标签;
利用所述训练样本集合中的样本对情感分析模型进行训练,以脚本文件作为输入,以情感标签作为输出,当输出的情感标签与标注的情感标签的统一率满足预设阈值时,完成对情感分析模型的训练。
5.根据权利要求4所述的方法,其特征在于,所述基于所述脚本文件和情感标签,生成有感情的语音包括:
基于所述脚本文件和情感标签,通过TTS生成有感情的语音。
6.根据权利要求5所述的方法,其特征在于,所述基于所述表情关键点、语音和脚本文件,构建三维角色及其应用场景,驱动所述三维角色进行展示及互动包括:
基于所述表情关键点,驱动三维角色的面部表情;
基于脚本文件,构建与所述三维角色对应的应用场景;
基于所述应用场景,通过多模态智能脚本及知识图谱驱动所述三维角色进行展示及互动。
7.根据权利要求6所述的方法,其特征在于,所述三维角色包括面部表情、口型、头部运动和肢体动作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于迈吉客科技(北京)有限公司,未经迈吉客科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111529590.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:车辆
- 下一篇:层级式DAG区块链生成方法、设备、介质及程序产品