[发明专利]用于对话系统情景匹配的多模态融合学习分析方法和系统有效
申请号: | 202010415082.1 | 申请日: | 2020-05-15 |
公开(公告)号: | CN111581470B | 公开(公告)日: | 2023-04-28 |
发明(设计)人: | 王钦龙;沈李斌;赵迎功;李波;吴海华 | 申请(专利权)人: | 上海乐言科技股份有限公司 |
主分类号: | G06F16/906 | 分类号: | G06F16/906;G06F18/241;G06N3/0464;G06N3/048;G06N3/08 |
代理公司: | 上海专利商标事务所有限公司 31100 | 代理人: | 施浩 |
地址: | 200050 上海市长*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种用于对话系统情景匹配的多模态融合学习分析方法和系统,能够提高场景匹配率,提升用户体验,更加智能理解用户需求。其技术方案为:本发明处理和理解多源模态信息,分别对图像信息、音频信息和文本信息进行特征抽取得到各自特征的向量化表达,再将这些向量化表达通过注意力机制对不同模态的动态权重进行学习调整,同时对场景定义也进行特征抽取以得到其向量化表达,再将注意力机制加权后的输出向量和场景定义特征抽取后的输出向量,通过全连接层将这两个向量进行进一步的映射以进行转换,实现最终的分类决策动作。 | ||
搜索关键词: | 用于 对话 系统 情景 匹配 多模态 融合 学习 分析 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海乐言科技股份有限公司,未经上海乐言科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010415082.1/,转载请声明来源钻瓜专利网。
- 上一篇:一种减速带通行方法及装置
- 下一篇:数据移植的方法和装置