[发明专利]一种基于SAC的水下机器人自主控制方法有效
申请号: | 202111496814.5 | 申请日: | 2021-12-09 |
公开(公告)号: | CN114371719B | 公开(公告)日: | 2023-08-08 |
发明(设计)人: | 张金;罗仕清;杨睿;陈新 | 申请(专利权)人: | 湖南国天电子科技有限公司 |
主分类号: | G05D1/06 | 分类号: | G05D1/06;G06F18/22;G06N3/042;G06N3/045;G06N3/0464;G06N3/092 |
代理公司: | 长沙大珂知识产权代理事务所(普通合伙) 43236 | 代理人: | 王琼琦 |
地址: | 410000 湖南省长*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及水下机器人行为控制的技术领域,公开了一种基于SAC的水下机器人自主控制方法,包括:构建智能体分解模型,利用智能体分解模型将水下机器人分解为若干智能体;构建注意力图神经网络模型,将智能体状态映射为智能体依赖关系图;构建水下机器人控制策略模型;根据映射得到的智能体依赖关系图确定智能体执行动作的反馈收益,以智能体反馈收益为基础构建水下机器人控制策略模型的目标函数,并利用SAC算法对目标函数进行求解,得到水下机器人最优控制策略。本发明所述方法通过将水下机器人控制策略优化问题转换为多智能体控制策略优化问题,利用强化学习方法寻找智能体控制的最优策略,实现水下机器人的实时自主控制。 | ||
搜索关键词: | 一种 基于 sac 水下 机器人 自主 控制 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖南国天电子科技有限公司,未经湖南国天电子科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111496814.5/,转载请声明来源钻瓜专利网。