[发明专利]基于多模态智能机器人的交互身份鉴别与跟踪方法及系统有效
申请号: | 201711110949.7 | 申请日: | 2017-11-13 |
公开(公告)号: | CN107808145B | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 刘扬;李佩琛;邵阳雪 | 申请(专利权)人: | 河南大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G10L17/22;G10L17/18;G10L17/02;G06F3/0484;G06F21/32 |
代理公司: | 郑州大通专利商标代理有限公司 41111 | 代理人: | 陈勇 |
地址: | 475004 河南省开封市金*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于智能机器人领域,具体涉及用于智能对话机器人的多模态的鉴别和跟踪交互者身份的方法,尤其涉及基于多模态智能机器人的交互身份鉴别与跟踪方法及系统。基于多模态智能机器人的交互身份鉴别与跟踪方法,包括:采集交互对象的多通道信息;采用深度神经网络提取激活特征,构成多通道交互信息的多模态特征;采用跨模态概率认知的集成学习,对人脸图像特征和声纹特征进行身份鉴别;对由跨模态属性鉴别出的交互者身份进行注册和跟踪。基于多模态智能机器人的交互身份鉴别与跟踪系统,包括:多通道信息采集模块;多模态特征提取模块;跨模态身份鉴别模块;交互对象注册跟踪模块。本发明可解决单模态信息缺失,无法识别和跟踪交互身份问题。 | ||
搜索关键词: | 基于 多模态 智能 机器人 交互 身份 鉴别 跟踪 方法 系统 | ||
【主权项】:
一种基于多模态智能机器人的交互身份鉴别与跟踪方法,其特征在于,包括以下步骤:步骤1:采集交互对象的多通道信息;步骤2:采用深度神经网络提取激活特征,构成多通道交互信息的多模态特征;步骤3:采用跨模态概率认知的集成学习,对人脸图像特征和声纹特征进行身份鉴别;步骤4:对由跨模态属性鉴别出的交互者身份进行注册和跟踪。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于河南大学,未经河南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711110949.7/,转载请声明来源钻瓜专利网。