[发明专利]一种用于医疗护理机器人的多模态情感识别方法在审
| 申请号: | 202210399065.2 | 申请日: | 2022-04-15 |
| 公开(公告)号: | CN114724224A | 公开(公告)日: | 2022-07-08 |
| 发明(设计)人: | 付明磊;张欣;张文安;刘锦元;仇翔;刘安东;杨旭升;史秀纺;周叶剑;吴麒;胡佛 | 申请(专利权)人: | 浙江工业大学 |
| 主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V20/40;G06N3/08;G06N3/04;G06K9/62;G06V10/764;G06V10/82;G06V10/46 |
| 代理公司: | 杭州天正专利事务所有限公司 33201 | 代理人: | 舒良 |
| 地址: | 310014 浙*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 一种用于医疗护理机器人的多模态情感识别方法,包括:进行多模态情感信息采集,采集到患者的视频信息和音频信息;根据所述视频信息进行表情自注意力情感特征提取和动作自注意力情感特征提取,根据所述音频信息进行语音自注意力情感特征提取和文本自注意力情感特征提取;4种自注意力情感特征进行基于互注意力机制情感特征融合,得到完整的多模态情感特征;多模态情感特征进行基于图卷积神经网络的上下文情感特征提取,得到包含上下文信息的多模态情感特征;包含上下文信息的多模态情感特征进行情感分类识别得到情感标签结果;根据所述情感标签结果进行语音交互和显示。本发明能提高对人的情感识别准确率。 | ||
| 搜索关键词: | 一种 用于 医疗 护理 机器人 多模态 情感 识别 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江工业大学,未经浙江工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210399065.2/,转载请声明来源钻瓜专利网。





