[发明专利]数据测试的方法、装置、设备及介质在审
申请号: | 202310680783.1 | 申请日: | 2023-06-09 |
公开(公告)号: | CN116610661A | 公开(公告)日: | 2023-08-18 |
发明(设计)人: | 杜仕伟 | 申请(专利权)人: | 上海米哈游天命科技有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/28;G06F16/22 |
代理公司: | 上海港慧专利代理事务所(普通合伙) 31402 | 代理人: | 郭嘉莹 |
地址: | 200233 上海市徐汇*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 测试 方法 装置 设备 介质 | ||
本申请提供了一种数据测试的方法、装置、设备及介质,用于对可视化报表中的数据和数据仓库中的数据之间进行测试,所述方法包括:通过预设第一程序,获取所述可视化报表中,目标指标下的第一数据;通过预设第二程序,获取所述数据仓库中,所述目标指标下的第二数据;将所述第一数据和所述第二数据进行比对,确定比对结果;根据所述比对结果,确定数据测试是否通过,可以至少用以解决相关技术中无法对数据实现自动化测试的技术问题。
技术领域
本申请涉及信息技术领域,尤其涉及一种数据测试的方法、装置、设备及介质。
背景技术
随着企业大数据、移动互联网、多媒体等业务的发展,企业的数据量越来越大,运用数据的业务场景越来越多,数据的结构也越来越多样化,对数据的准确性需求也不断扩大,由此,数据测试应运而生。其中,数据测试指的是检查局部数据结构时,为了保证临时存储在模块内的数据在程序执行过程中完整、正确的过程。
由于通过数据测试可以保证数据质量,因此企业对此愈加重视。然而,发明人发现相关技术中至少存在如下技术问题:无法对数据实现自动化测试。
具体地,在相关技术中,大多是在接口层面对数据进行自动化监控,进而由人工进行数据测试。比如,在针对可视化报表中的数据和数据仓库中的数据进行数据测试的方案中,一般是对可视化报表的接口层面进行数据监控,然后通过人工手动在企业提供的查询平台手动编写SQL查询语句,使用Presto或Hive等引擎计算出数据仓库中的数据,然后再由人工通过肉眼根据计算出的数据仓库中的数据和监控到的可视化报表中的数据就某些指标进行对比,并由人工根据比对结果来判断对应数据是否正确。在上述方式的实现过程中,不仅需要人工手动切换区服,而且根据业务的不同,需要通过人工基于对应业务编写新的SQL查询语句,进而再由人工进行数据的对比、判断。其中,在通过人工手动在企业提供的查询平台手动编写SQL查询语句的过程中:若使用Presto,则需兼顾编写的SQL查询语句的逻辑不能太复杂,数据量也不能太大,否则会出现报错的情况;若使用Hive,则虽然逻辑可以很复杂,也支持较大的数据量,但是需要考虑计算速度较慢的问题,因此对人工编写代码的能力要求较高。
综上分析可知,相关技术中无法对数据实现自动化测试,非常依赖人工操作,测试效率较低,会消耗大量的人力成本和时间成本,并且需要人工手动进行数据维护。随着企业的数据仓库中的数据越来越多,可视化数据报表业务也越来越多,如果还一味依靠相关技术中的测试方式,必然会极大增加相关人员在数据测试方面的工作负担。
发明内容
本申请的一个目的是提供一种数据测试的方法、装置、设备及介质,至少用以解决相关技术中无法对数据实现自动化测试的技术问题。
为实现上述目的,本申请的一些实施例提供了一种数据测试的方法,用于对可视化报表中的数据和数据仓库中的数据之间进行测试,所述方法包括:通过预设第一程序,获取所述可视化报表中,目标指标下的第一数据;通过预设第二程序,获取所述数据仓库中,所述目标指标下的第二数据;将所述第一数据和所述第二数据进行比对,确定比对结果;根据所述比对结果,确定数据测试是否通过。
可选地,所述通过预设第一程序,获取所述可视化报表中,目标指标下的第一数据包括:通过预设第一程序,确定与所述目标指标对应的预设参数;根据所述预设参数进行拼接,得到URL;根据所述URL,获取所述可视化报表中,目标指标下的第一数据。这里,提供了通过预设第一程序,获取所述可视化报表中,目标指标下的第一数据的一种具体实现方式,有利于本申请实施例获取所述目标指标下的第一数据的方式得以灵活多变的实现。
可选地,所述通过预设第二程序,获取所述数据仓库中,所述目标指标下的第二数据包括:通过预设第二程序,确定获取所述预设参数的优先级;根据所述优先级,从所述数据仓库的Hive底表中,获取与所述预设参数对应的第二数据。这里,提供了通过预设第二程序,获取所述数据仓库中,所述目标指标下的第二数据的一种具体实现方式,有利于本申请实施例获取所述目标指标下的第二数据的方式得以灵活多变的实现。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海米哈游天命科技有限公司,未经上海米哈游天命科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310680783.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置