[发明专利]一种空中博弈仿真方法及装置

说明书

本发明公开了一种空中博弈仿真方法及装置，所述方法包括：获取配置参数，利用仿真模块生成空中博弈仿真环境；构建第一智能算法模型；所述第一智能算法模型用于生成控制第一方空中力量的指令；利用所述空中博弈仿真环境，对所述第一智能算法模型进行训练，得到第二智能算法模型；对所述第二智能算法模型进行评估，得到评估结果。本发明通过引入深度强化学习算法和混合现实技术，实现操作员可以直接控制虚拟世界的实体与智能体对抗，使得在智能算法训练阶段，能够学习多种现实的随机不确定场景，增强智能体的泛化性，在算法模型评估时，通过混合现实技术使操作员直接与智能模型控制的智能体进行对抗，验证智能模型训练的效果。

技术领域

本发明涉及计算机仿真技术领域，尤其涉及一种空中博弈仿真方法及装置。

背景技术

在军事领域的空中博弈仿真过程中，传统仿真技术中驱动实体和智能体动作主要是依赖规则算法即专家经验，实体每一步的动作都是由预先编码好的规则控制，为了适应多种场景的变换，规则算法就需要设计的复杂且全面，规则算法模型需要资深的经验算法工程师来构造，导致规则算法的构建难度较大，对经验的要求较高，训练的效果受规则算法模型制定的难易程度影响。

另外，传统仿真系统中，一旦算法构建完毕，训练过程中外界很难介入，缺少与现实操作员的对抗，导致智能体无法学习现实中的随机不确定场景。传统的“人在环”完全是基于虚拟环境，这种方式将操作员与虚拟环境隔离，不便于与虚拟环境中的实体进行交互，智能体只能与模拟端由规则控制的实体对抗外，无法与由现实操作员控制的实体进行对抗，导致仿真验证方法缺少实用性。

因此，亟需一种算法设计难度低，且能实时引入操作员交互的空中仿真方法。

发明内容

鉴于上述存在的问题，本发明的目的在于提供一种空中博弈仿真方法，在智能体控制方法中引入强化学习算法，构建智能算法模型，使得智能算法能够根据具体战场场景自主做出相应的决策；引入混合现实技术，现实世界的操作员可以协同规则算法直接控制虚拟世界的实体与智能体对抗，使得智能算法能够学习多种现实的随机不确定场景，增强智能体的泛化性；在智能博弈评估阶段，智能体可以与由现实操作员控制的实体进行对抗，增强仿真实用性。

为达到上述目的，本发明实施例第一方面公开了一种空中博弈仿真方法，所述方法包括：

S1、获取配置参数，利用仿真模块生成空中博弈仿真环境；

S2、构建第一智能算法模型；所述第一智能算法模型用于生成控制第一方空中力量的指令；

S3、基于所述空中博弈仿真环境，对所述第一智能算法模型进行训练，得到第二智能算法模型；

S4、对所述第二智能算法模型进行评估，得到评估结果。

作为一种可选的实施方式，在本发明实施例第一方面中，所述基于所述空中博弈仿真环境，对所述第一智能算法模型进行训练，得到第二智能算法模型，包括：

S31、基于所述空中博弈仿真环境，利用所述仿真模块生成第一态势信息；所述态势信息包括第一方空中力量信息、第二方空中力量信息、环境数据信息；所述第一方空中力量信息与所述第二方空中力量信息为对抗双方；

S32、利用所述第一智能算法模型，对所述第一态势信息进行处理，得到第一指令；所述第一指令用于控制第一方空中力量；

S33、利用地图模块和混合现实模块，向操作员展示所述第一态势信息，得到第一交互信息；所述第一交互信息包括语音交互信息、手柄交互信息、凝视交互信息；

S34、利用预设的规则算法模型，对所述第一交互信息进行处理，得到第二指令；所述第二指令包括巡逻、撤退、护航、攻击；所述第二指令用于控制第二方空中力量；

S35、根据所述第一指令和所述第二指令，控制所述仿真模块进行步长推进，生成第二态势信息；