本申请公开了一种自动测试程序的构建方法、装置、设备以及存储介质,该方法包括:获取预先构建的控制层框架和至少一个测试项目执行组件;控制层框架基于Grad l e插件构建,且控制层框架具有至少一个公共接口;将至少一个测试项目执行组件接入至少一个公共接口,得到接入组件后的控制层框架;根据接入组件后的控制层框架,生成配置文件;调整配置文件中至少一个测试项目执行组件的执行顺序和至少一个测试项目执行组件的测试流程,获得调整后的配置文件;基于调整后的配置文件,构建自动测试程序。本申请通过将代码的控制层以Grad l e插件为核心规范化,得到控制层接口统一标准化的控制层框架,提高了开发人员的工作效率。