[发明专利]一种基于平行仿真的测试评估方法、装置及系统

权利要求书

1.一种基于平行仿真的测试评估方法，其特征在于，所述方法包括：

获取测试评估任务；

分别执行真实场景下的所述测试评估任务和仿真场景下的所述测试评估任务，并采集对应场景下的数据；

将真实场景下所采集的第一数据和仿真场景下所采集的第二数据，进行对比分析，得到分析结果；

基于所述分析结果，得到仿真系统/场景所存在的不足，通过人工/系统策略，对测试评估任务进行更新。

2.根据权利要求1所述的方法，其特征在于，所述获取测试评估任务之前，还包括：配置测试评估任务；

所述测试评估任务，包括：测试对象、测试范围、测试目的、所需资源、时间计划、执行规划、采集数据及监控内容。

3.根据权利要求1所述的方法，其特征在于，所述获取测试评估任务之前，还包括：对测试环境/数据进行定义；

所述对测试环境/数据进行定义，包括：对虚拟化场景元素的描述、构建方式、网络、事件进行定义，生成目标定义，基于所述目标定义对数据采集内容、采集形式及数据接收方式进行说明。

4.根据权利要求1所述的方法，其特征在于，所述获取测试评估任务，包括：根据预先获取的场景库、资源库、测试库及镜像库，构建所需的场景，并配置场景所需的配置文件，在仿真系统中部署数据采集手段和策略，所述配置文件包括：网络、路由及地址。

5.根据权利要求1所述的方法，其特征在于，

所述第一数据，包括：节点的网络流量、访问日志记录、设备监控记录和告警日志；

所述第二数据，包括：预设的系统的运行监控数据；

所述运行监控数据，包括：磁盘、内存、CPU及网络资源利用情况，预设的程序及文件目录的变更情况和系统的日志监控输出内容。

6.根据权利要求1所述的方法，其特征在于，所述基于所述分析结果，得到仿真系统/场景所存在的不足，通过人工/系统策略，对测试评估任务进行更新，还包括：基于所述分析结果，对预设的测试范围、资源和测试的强度进行发散，得到与发散方式对应的因素，并对所述因素进行聚合分析。

7.根据权利要求1所述的方法，其特征在于，

所述不足，包括：静态仿真程度上的不足、动态上的不足及物理硬件的不足。

8.根据权利要求1所述的方法，其特征在于，所述基于所述分析结果，得到仿真系统/场景所存在的不足，通过人工/系统策略，对测试评估任务进行更新之后，还包括：输出评估结果；

所述评估结果，包括：优化后的网络靶场的场景定义特性、场景定义单元、场景所需的业务背景流量及调度生成策略、现有的真实世界业务弹性/网络弹性的评估结果、演进建议及重点方向。

9.一种基于平行仿真的测试评估装置，其特征在于，所述装置包括：

获取模块，用于获取测试评估任务；

采集模块，用于分别执行真实场景下的所述测试评估任务和仿真场景下的所述测试评估任务，并采集对应场景下的数据；

对比分析模块，用于将真实场景下所采集的第一数据和仿真场景下所采集的第二数据，进行对比分析，得到分析结果；

更新模块，用于基于所述分析结果，得到仿真系统/场景所存在的不足，通过人工/系统策略，对测试评估任务进行更新。

10.一种基于平行仿真的测试评估系统，其特征在于，所述系统包括：

场景定义模块，用于通过接口获取网络靶场中仿真场景的定义，所述场景定义，包括：资源定义、资源特性和使用方式；

策略配置模块，用于对数据采集范围、内容及方式进行配置，对网络靶场中场景的自定义访问、流量进行调度；

数据接收模块，用于接收真实场景下所采集的第一数据和仿真场景下所采集的第二数据；

综合测试模块，用于对网络靶场中场景内数据进行集中分析和对真实场景数据进行集中分析，提供多维度的可视化展示；

评估管理模块，用于输出可视化报告。