[发明专利]虚拟人多模态交互数据处理方法和系统在审
| 申请号： | 201711014777.3 | 申请日： | 2017-10-26 |
| 公开（公告）号： | CN107784355A | 公开（公告）日： | 2018-03-09 |
| 发明（设计）人： | 尚小维;李贺超;李晓丹 | 申请（专利权）人： | 北京光年无限科技有限公司 |
| 主分类号： | G06N3/00 | 分类号： | G06N3/00;G06F17/27;G06F17/30 |
| 代理公司： | 北京聿华联合知识产权代理有限公司11611 | 代理人： | 朱绘,张文娟 |
| 地址： | 100000 北京市石景山区石景山*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供一种虚拟人多模态交互数据处理方法，其包括以下步骤获取多模态输入数据；调用机器人能力接口解析多模态输入数据，并生成多模态输出数据，其中包括应答数据；将应答数据中的语音文件与虚拟人的头部运动模型进行匹配，其中，语音文件包括音频旋律及文本切词结果；通过虚拟人的形象输出头部运动数据及其他多模态输出数据，其中，多模态输出数据与虚拟人的性格、属性以及技能关联。本发明提供的虚拟人多模态交互数据处理方法和系统中虚拟人的头部动作能够与输出的语音文件在输出的时间点以及表达意向上匹配，虚拟人头部的动作能够配合输出的语音进行点头、摇头以及头部摆动等多种动作，丰富了交互的内容，提升了用户的交互体验。 | ||
| 搜索关键词： | 虚拟 人多模态 交互 数据处理 方法 系统 | ||
【主权项】：
一种虚拟人多模态交互数据处理方法，其特征在于，所述虚拟人搭载于具有操作系统的智能硬件设备中，所述虚拟人在被启动后显示在预设区域内，并具备特定的形象、性格设定、社会属性以及技能，所述虚拟人多模态交互数据处理方法包括以下步骤：获取多模态输入数据；调用机器人能力接口解析所述多模态输入数据，并生成多模态输出数据，其中包括应答数据；将所述应答数据中的语音文件与所述虚拟人的头部运动模型进行匹配，其中，所述语音文件包括：音频旋律及文本切词结果；通过虚拟人的形象输出头部运动数据及其他多模态输出数据，其中，所述多模态输出数据与所述虚拟人的性格、属性以及技能关联。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京光年无限科技有限公司，未经北京光年无限科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201711014777.3/，转载请声明来源钻瓜专利网。
