[发明专利]一种多Agent围捕-觅食行为控制方法有效
申请号: | 201710107633.6 | 申请日: | 2017-02-27 |
公开(公告)号: | CN106843220B | 公开(公告)日: | 2019-10-18 |
发明(设计)人: | 康琦;冯书维;张凯 | 申请(专利权)人: | 同济大学 |
主分类号: | G05D1/02 | 分类号: | G05D1/02 |
代理公司: | 上海科盛知识产权代理有限公司 31225 | 代理人: | 翁惠瑜 |
地址: | 200092 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 agent 围捕 觅食 行为 控制 方法 | ||
1.一种多Agent围捕-觅食行为控制方法,其特征在于,包括以下步骤:
1)对多Agent和猎物当前所处位置形成的状态空间进行划分;
2)设计奖赏函数;
3)根据步骤1)划分的状态空间及步骤2)的奖赏函数进行强化学习,控制各Agent进行相应的原子动作,实现对猎物的围捕,在满足围捕成功条件时停止,达到觅食效果;
所述步骤1)中,对状态空间的划分具体为:
101)将Agent与猎物之间的角度进行划分;
102)将各Agent与猎物之间的距离进行离散分段。
2.根据权利要求1所述的多Agent围捕-觅食行为控制方法,其特征在于,所述将Agent与猎物之间的角度进行划分具体为:将两个Agent与猎物之间的夹角划分为如下表的10个状态
。
3.根据权利要求1所述的多Agent围捕-觅食行为控制方法,其特征在于,所述划分为非均匀状态划分,所述离散分段为非均匀划分。
4.根据权利要求1所述的多Agent围捕-觅食行为控制方法,其特征在于,所述步骤2)中,奖赏函数R为:
R=a*J+rn
其中,J为角度奖赏,J=G(θ)left+G(θ)right,G(θ)left为某一Agent的左夹角θleft对应的角度奖赏,G(θ)right为该Agent的右夹角θright对应的角度奖赏,rn为距离奖赏,a为J与rn之间的相对重要程度系数。
5.根据权利要求4所述的多Agent围捕-觅食行为控制方法,其特征在于,每个角度θ对应的角度奖赏表达式为:
6.根据权利要求4所述的多Agent围捕-觅食行为控制方法,其特征在于,所述距离奖赏rn通过以下表格获取:
d 0~0.5m 0.5~1.0m 0.5~1.4m 1.4~2.0m 2.0~3.5m 3.5~5.0m >5.0m rn 1.2 1.1 1.0 0.7 0.5 0.2 0
其中,d表示Agent与猎物之间的距离。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于同济大学,未经同济大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710107633.6/1.html,转载请声明来源钻瓜专利网。