[发明专利]应用程序测试的评估方法、装置、存储介质和终端设备

说明书

本发明提出一种应用程序测试的评估方法、装置、存储介质和终端设备，其中，所述方法包括：根据应用程序在线下阶段的测试行为日志，统计所述应用程序的线下覆盖点集和线下测试覆盖率；根据所述应用程序在灰度阶段的用户行为日志，统计所述应用程序的灰度覆盖点集和灰度测试覆盖率；根据所述线下覆盖点集和所述灰度覆盖点集，统计整体测试覆盖率；根据所述线下测试覆盖率、所述灰度测试覆盖率和所述整体测试覆盖率，评估所述应用程序的测试结果。采用本发明，可以评估应用程序在正式发布之前的整个测试过程的测试结果。

技术领域

本发明涉及计算机技术领域，尤其涉及一种应用程序测试的评估方法、装置、存储介质和终端设备。

背景技术

覆盖率用于衡量当前已执行的测试用例对测试对象覆盖的程度，是度量该测试用例的完整性、有效性的一种手段。

目前，统计应用程序的测试覆盖率的实现方式，有以下方案：

1、采用AOP(Aspect Oriented Programming，面向切面编程)方法统计测试覆盖率。AOP是通过预编译的方式，在应用程序的运行期间动态代理实现程序功能的统一维护的一种技术。AOP将覆盖标记代码插入应用程序的原代码中，应用程序在执行的过程，可以记录被执行的覆盖信息，且不影响原有代码的执行行为。进而，根据记录到的被执行的覆盖信息，统计应用程序的测试覆盖率。

2、通过代码插桩的方式，在应用程序的代码中增加覆盖率统计的代码，在应用程序运行的过程中可以直接统计到测试覆盖率。

在以上的两种方案的测试覆盖率的统计过程中，可以根据应用程序测试的函数覆盖、语句覆盖、判断覆盖、条件覆盖、路径覆盖等覆盖情况进行统计。但是，此类覆盖的数据多用于单次测试集的执行效果，如全功能回归、新功能测试的测试覆盖率的统计。而对于要发布的应用程序，难以给出研发该应用程序的整个项目的整体评估。

发明内容

本发明实施例提供一种应用程序测试的评估方法、装置、存储介质和终端设备，以解决或缓解现有技术中的以上一个或多个技术问题。

第一方面，本发明实施例提供了一种应用程序测试的评估方法，包括：

根据应用程序在线下阶段的测试行为日志，统计所述应用程序的线下覆盖点集和线下测试覆盖率；

根据所述应用程序在灰度阶段的用户行为日志，统计所述应用程序的灰度覆盖点集和灰度测试覆盖率；

根据所述线下覆盖点集和所述灰度覆盖点集，统计整体测试覆盖率；

根据所述线下测试覆盖率、所述灰度测试覆盖率和所述整体测试覆盖率，评估所述应用程序的测试结果。

结合第一方面，在第一方面的第一种实施方式中，所述根据应用程序在线下阶段的测试行为日志，统计所述应用程序的线下覆盖点集和线下测试覆盖率，包括：

根据所述应用程序在线下阶段的各次线下测试的测试行为日志，统计各次线下测试对应的测试覆盖点集；所述测试覆盖点集的元素表示所述应用程序在单次线下测试中被测试的操作行为；

将各次线下测试的测试覆盖点集包含的元素进行并集，获得所述应用程序的线下覆盖点集；

根据所述线下覆盖点集和所述应用程序的埋点全集，获得所述应用程序的线下测试覆盖率，所述线下测试覆盖率为所述线下覆盖点集的元素数量与所述埋点全集的元素数量的比值，所述埋点全集的元素表示所述应用程序的所有可操作行为。

结合第一方面，在第一方面的第二种实施方式中，所述根据所述应用程序在灰度阶段的用户行为日志，统计所述应用程序的灰度覆盖点集和灰度测试覆盖率，包括：

根据在灰度阶段中各用户使用所述应用程序的用户行为日志，统计各用户对应的使用覆盖点集；所述使用覆盖点集的元素表示单个用户运行所述应用程序的操作行为；