[发明专利]基于注意力机制的物体操作指令跟随学习方法及装置有效
申请号: | 202110500653.6 | 申请日: | 2021-05-08 |
公开(公告)号: | CN113326933B | 公开(公告)日: | 2022-08-09 |
发明(设计)人: | 鲁继文;周杰;肖厚元 | 申请(专利权)人: | 清华大学 |
主分类号: | G06V10/46 | 分类号: | G06V10/46;G06V10/80;G06V10/82;G06N3/08;G06N3/04;G06K9/62 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 刘梦晴 |
地址: | 10008*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于注意力机制的物体操作指令跟随学习方法及装置,该方法包括:获取目标场景图像,提取目标场景图像的图像特征;对物体操作指令进行特征提取得到物体操作指令的文本特征;通过双线性模型对图像特征和物体操作指令的文本特征进行融合,得到图像特征上的注意力分布;将注意力分布作用到初始的图像特征上进行加权,根据加权后的图像特征得到操作参数在各自空间的概率分布,将概率最大值对应的操作参数作为动作参数。该方法解决了现有物体操作指令跟随方法性能低下的问题。 | ||
搜索关键词: | 基于 注意力 机制 物体 操作 指令 跟随 学习方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110500653.6/,转载请声明来源钻瓜专利网。