[发明专利]卫星东西保持策略模型的建模方法、模型、获取方法

说明书

本发明涉及航空航天领域，提供一种卫星东西保持策略模型的建模方法、模型、获取方法、设备、介质，建模方法包括：S1：获取多组卫星训练状态数据组；S2：得到初始时刻之后所有切向控制行为及所对应输出的Q值；S3：获得当前时刻卫星状态和卫星执行的切向控制行为；S4：得到奖励和下一时刻卫星状态；S5：将卫星组合状态数据组存入经验池中；S6：计算目标值；S7：根据损失函数计算误差；S8：更新Q值；将下一时刻卫星状态作为当前时刻卫星状态；S9：重复执行预期轨控次数的步骤S3‑S8；每重复执行指定迭代次数的步骤S3‑S8后，更新目标神经网络权值参数；S10：重复执行步骤S2‑S9。本方案能够得到最优的决策策略，减少卫星燃料的消耗。

技术领域

本发明涉及航空航天技术领域，特别是涉及一种基于Nature DQN的卫星东西保持策略模型的建模方法、模型、获取方法、设备、介质。

背景技术

随着人类航天活动的不断开展，越来越多的遥感卫星为人们的日常生活提供帮助。

GEO卫星在运行的过程中会受到日、月引力和地球非球形摄动的影响，从而导致在东西方向上发生漂移，所以对GEO三轴稳定卫星东西位置保持控制对于航天领域有至关重要的作用。

现有的技术方法首先分析了卫星东西漂移是由于卫星在轨道运行过程中受到的地球形状和太阳光压等各种摄动力的影响所导致卫星的平经度和偏心率发生变化，然后根据摄动力进行建模并制定东西保持的策略，进而对保持参数进行优化并且计算推进剂的消耗量。现有技术方法通过对卫星在轨道运行过程中受到的各种摄动力进行复杂的建模，然而由于空间受力的复杂性以及卫星本身参数的不确定性，导致无法对卫星进行精确建模，参数多、计算复杂，进而影响卫星东西控制的精度，可能会消耗更多的燃料。

因此，亟需开发一种基于Nature DQN的卫星东西保持策略模型的建模方法、模型、获取方法、设备、介质，降低建模难度，精确计算东西保持策略。

发明内容

本发明的目的是提供一种卫星东西保持策略模型的建模方法、模型、获取方法、设备、介质，对GEO三轴稳定卫星进行东西位置保持时不需要进行复杂的建模，不需要考虑空间受力的复杂性以及卫星本身参数的不确定性，强化学习具有很强的行为决策能力，能够得到最优的决策策略，减少卫星燃料的消耗。

为解决上述技术问题，作为本发明的一个方面，提供了一种基于Nature DQN的卫星东西保持策略模型的建模方法，包括以下步骤：

S1：初始化模型，获取多组卫星训练状态数据组，每组卫星训练状态数据组包括卫星的初始状态、多个预期轨控时刻和预期轨控次数；每个卫星的初始状态包括初始时刻卫星状态；卫星状态包括平经度和偏心率矢量；

S2：向模型中输入一组卫星训练状态数据组的初始时刻卫星状态，得到初始时刻之后所有切向控制行为及所对应输出的Q值；

S3：获取当前时刻卫星状态，根据贪心策略获得卫星执行的切向控制行为；

S4：执行切向控制行为，得到下一时刻卫星状态及实际轨控时刻，根据实际轨控时刻、东西保持策略奖励函数得到奖励；所述东西保持策略奖励函数采用公式1：

其中，r_t为当前时刻卫星进行切向控制行为所获得的奖励，Δt为距离实际轨控时刻的时间间隔，根据当前时刻及实际轨控时刻获得；Δt越长，保持周期越长，奖励越高；t₀为与当前时刻距离最近的预期轨控时刻；t为当前时刻；

S5：将当前时刻卫星状态、卫星执行的切向控制行为、奖励和下一时刻卫星状态作为一组卫星组合状态数据组存入经验池中；

S6：从经验池中取出多组卫星组合状态数据组，根据目标神经网络权值参数计算每个卫星组合状态数据组的目标值；

S7：根据损失函数计算误差，并更新当前神经网络权值参数；