[发明专利]数据测试方法、存储介质和电子设备

说明书

本发明公开了一种数据测试方法、存储介质和电子设备。其中，该方法包括：从多种类型数据源中查询待测试数据，其中，多种类型数据源存储于云端的多源数据仓库中；基于待测试数据关联的多个测试指标生成测试脚本集合，其中，多个测试指标用于验证待测试数据的数据质量，测试脚本集合包括：多个测试脚本，多个测试脚本中的每个测试脚本分别用于执行不同类型数据源中的测试子任务；执行测试脚本集合，得到测试结果；对测试结果进行汇总，生成测试报告。本发明解决了相关技术中由于数据正确性测试效率低、准确性差导致多源数据仓库中难以保证数据正确性的技术问题。

技术领域

本发明涉及计算机技术领域，具体而言，涉及一种数据测试方法、存储介质和电子设备。

背景技术

在大数据系统中，尤其在数据在线分析处理(Online Analytical Processing，OLAP)的场景下，通常使用数据仓库作为服务底层的支撑。数据仓库往往涉及多来源、多渠道、多种类的大量级数据，并且对数据加工的逻辑较复杂，因此，数据仓库的多个工作环节(如数据采集、数据加工、数据生产、同步等)中都可能出现逻辑错误或故障(Bug)，进而降低数据的正确性(如出现数据缺失、数据异常、数据错误和数据不一致等问题)。然而，数据的正确性直接影响大数据服务的上层分析决策、产品效益和用户体验，因此，如何保障大数据系统中多源数据的正确性成为相关领域中亟待解决的问题。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种数据测试方法、存储介质和电子设备，以至少解决相关技术中由于数据正确性测试效率低、准确性差导致多源数据仓库中难以保证数据正确性的技术问题。

根据本发明实施例的一个方面，提供了一种数据测试方法，包括：从多种类型数据源中查询待测试数据，其中，多种类型数据源存储于云端的多源数据仓库中；基于待测试数据关联的多个测试指标生成测试脚本集合，其中，多个测试指标用于验证待测试数据的数据质量，测试脚本集合包括：多个测试脚本，多个测试脚本中的每个测试脚本分别用于执行不同类型数据源中的测试子任务；执行测试脚本集合，得到测试结果；对测试结果进行汇总，生成测试报告。

根据本发明实施例的另一方面，还提供了一种数据测试方法，包括：从多种类型电商广告数据源中查询待测试电商广告数据，其中，多种类型电商广告数据源存储于云端的多源数据仓库中；基于待测试电商广告数据关联的多个电商广告数据测试指标生成电商广告数据测试脚本集合，其中，多个电商广告数据测试指标用于验证待测试电商广告数据的数据质量，电商广告数据测试脚本集合包括：多个电商广告数据测试脚本，多个电商广告数据测试脚本中的每个电商广告数据测试脚本分别用于执行不同类型电商广告数据源中的电商广告数据测试子任务；执行电商广告数据测试脚本集合，得到电商广告数据测试结果；对电商广告数据测试结果进行汇总，生成电商广告数据测试报告。

根据本发明实施例的另一方面，还提供了一种数据测试方法，包括：从多种类型电商订单数据源中查询待测试电商订单数据，其中，多种类型电商订单数据源存储于云端的多源数据仓库中；基于待测试电商订单数据关联的多个电商订单数据测试指标生成电商订单数据测试脚本集合，其中，多个电商订单数据测试指标用于验证待测试电商订单数据的数据质量，电商订单数据测试脚本集合包括：多个电商订单数据测试脚本，多个电商订单数据测试脚本中的每个电商订单数据测试脚本分别用于执行不同类型电商订单数据源中的电商订单数据测试子任务；执行电商订单数据测试脚本集合，得到电商订单数据测试结果；对电商订单数据测试结果进行汇总，生成电商订单数据测试报告。

根据本发明实施例的另一方面，还提供了一种计算机可读存储介质，上述计算机可读存储介质包括存储的程序，其中，在上述程序运行时控制上述计算机可读存储介质所在设备执行任意一项上述的数据测试方法。